如何对海量数据的高效管理与快速检索 - 安防知识网

由于涉及到的存储盘柜数量众多，且是多个厂家供货，再通过厂家提供的磁盘管理软件对数据进行管理和划分，不同的厂家软件操作不尽相同，将使得管理工作非常繁杂，也不能直观。地表示出录像数据与存储空间的关系。

【安防知识网】由于涉及到的存储盘柜数量众多，且是多个厂家供货，再通过厂家提供的磁盘管理软件对数据进行管理和划分，不同的厂家软件操作不尽相同，将使得管理工作非常繁杂，也不能直观。地表示出录像数据与存储空间的关系。因此，我们构建了一个独立于硬件的、图形化的虚拟存储条带解决方案，不仅能够清晰直观地看到每个共享存储区域中高清摄像头、存储流媒体服务器、存储单元等拓扑关系，还使得系统能够在虚拟存储条带上进行数量、容量上的线性扩充。

　　系统按照“虚拟存储条带”自动为高清摄像头分组，为存储磁盘分组，通过自动化的手段创建由高清摄像头组、存储流媒体服务器和存储磁盘构建的虚拟存储条带;同时，系统支持图形化的操作，能够便捷地改变高清摄像头组、存储流媒体服务器或存储磁盘的对应关系。

　　面对前所未有的20PB大数据量，其数据检索的效率问题如何解决?如何快速精确定位用户期望的资料?系统采用了高效的索引构建优化方法，文件采用多层、分布、金字塔式的超级索引技术，定位时采用逐层分段查询访问的方式(对于层次的数量根据应用需求可扩展和控制)，结合优化的ASMF媒体文件格式，检索时能够快速精确定到文件中的任意帧及视频段，而不需要分析整个索引，极大地提高了文件定位和响应速度。