近些年来大数据、云计算、云存储在IT界可谓炙手可热,那其在视频监控行业的需求和应用又怎么样呢?不同行业、规模、应用需求的视频监控系统是否需要建设云存储呢?各行业的决策者们无疑还存在一些疑惑,但是随着视频监控系统对视频图像清晰度的不断追求、系统规模的不断扩大、应用需求不断趋向多样化,云存储应用是视频监控系统发展的必然需求。
监控的应用未来:云存储和智能监控缺一不可
监控云存储的出现,突破传统存储方式的性能和容量瓶颈,使云存储提供商能够联结网络中大量各种不同类型的存储设备形成异常强大的存储能力,实现性能与容量的线性扩展,让海量数据的存储成为了可能,从而让企业拥有相当于整片云的存储能力,成功解决存储难题。
目前监控系统中,存储和传输问题是首要面临的难关,大量无用视频信息被存储、传输,既浪费了存储空间又增加了带宽,智能分析的目的是为了视频存储所需要的空间减少从而缓解带宽压力,或者对于一些无用视频则采用低码流方式进行压缩或传输,更方便整套系统调查或查询使用,提升监控系统的应用价值。
随着安防监控技术与用户需求相结合的趋势愈加明显,在安防监控产品集成实施过程中,存储技术也必须不断适应安防监控的应用特点,不断的完善自己,存储产品和安防监控技术整合已经是大势所趋。监控云存储系统就是存储和监控相融合的产品也印证了这种发展趋势。
云存储的需求分析
首先是视频图像清晰度发展需求。视频监控对视频图像的清晰度需求是无止境的。视频图像的分辨率从QCIF、CIF、D1、720P、1080P、4K、8K一路走来,仅仅使用了不到十年的时间,现在已开始步入4K分辨率主流年代。随着视频图像分辨率的不断增大,相应对视频图像的存储要求也越来越高。例如:1路D1图像(1M码率)存储30天需要的存储容量约为300GB左右,1路1080P图像(4M码率)存储30天需要的存储容量约为1.2TB左右,1路4K(8M码率)存储30天则达到了2.4TB左右,可见随着视频图像清晰度的增加,存储容量的需求也急剧增大。
其次是安防视频监控系统向着大规模、海量数据、智能化和融合应用的方向快速发展需求。近十几年来国内外的各行各业,安防视频监控系统摄像机的数量规模急剧增加。在铁路行业,随着新增沿线入侵报警与视频监控需求的明晰,一条铁路线的建设规模就从几千到上万路摄像机不等;而如一个中等规模城市的平安城市建设规模摄像机数量可能达几万路。1000路的1080P(4M码率24小时30天)视频图像存储容量就可以达到1PB,而1万路的1080P视频存储容量超过了10个PB,安防视频监控系统的存储应用已经进入了存储PB级年代。宇视推出的全新一代统一云存储(UnitedCloudStorage)系统,能提供高达数百PB级别的海量存储空间,且兼具高性能、高可靠、强扩展以及易运维等特性,能够很好地满足用户多样化业务的使用需求。
从性能和容量上看,单台存储设备的性能和扩展性基本可以满足PB级以内的视频接入和图像存储需求,但是要接入成千上万路高清1080P,甚至是4K视频,存储几十PB、甚至上百PB的数据,无论是性能还是容量都无法应对,因为单台存储设备无法实现其性能与容量的线性增长;如果采用多台存储设备叠加的方式来实现增加的视频接入和图像存储需求,那么多台存储设备间相互独立,缺乏有效的数据整合与协同处理能力,也会存在以下问题:
1、存储设备统一管理问题。几十上百台的存储设备的管理必须由存储设备厂商提供专业的存储管理软件来完成设备的集中管理和维护,或者由安防视频监控平台厂商来提供存储集中管理服务软件。但是由于不同存储厂商的管理接口和协议各不相同,安防视频监控平台厂商在应对第三方存储设备管理时将变得异常困难;
2、存储资源按需分配问题。视频监控图像的存储时间一般在设计初期必须规划好,例如15天、30天、90天等甚至更长时间。后期需要对存储天数进行调整时,单台存储设备的空间资源无论是扩容还是缩容将无法真正做到存储空间的按需分配;
3、存储资源融合问题。安防行业涵盖门禁、报警、对讲、出入口控制、视频监控、电警卡口等子系统,存储信息包括视频图像、图片、文本、告警信息等。各子系统建设不同的存储用来保存信息,存储资源难以有效融合和利用,形成了事实的信息孤岛;
4、设备性能和存储空间共享及利用问题。按多台存储设备叠加方式部署的视频监控系统,一般先期建设的存储设备已经满负荷运载,而后期建设的存储设备在考虑系统扩展性后有一定的性能和存储空间冗余,但这部分性能和存储空间冗余就很难共享、也不便故障切换。
云存储解决方案
云存储技术则能够很好的解决上述问题。云存储是在云计算和存储概念上延伸和发展出来的一个新的理念,是一种新兴的网络存储技术,它通过集群应用、网络技术、分布式文件系统等将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能。云存储可对系统内的设备资源、带宽资源、存储空间资源等进行有效整合,可为用户提供大容量、高性能、高可靠的透明存储服务。相对于单台存储设备来说,云存储系统具备如下优势:
1、线性扩展的高并发读写性能。单台存储设备的并发读写性能容易受到控制器的CPU、缓存及网络接口的能力限制,读写带宽一般在512MB/S~2GB/S之间。而云存储系统可以利用集群技术将存储节点间的带宽和多台存储设备的处理能力进行聚合,随着存储节点数量的增加可以实现读写带宽、处理能力的线性增长,从理论上来说读写带宽可以是无限的。在实测中,已经达到整体读写带宽超过200GB/S的性能指标;
2、海量存储空间的弹性扩展。存储空间弹性扩展采用的是虚拟化技术,把众多存储设备虚拟化成单一的便于管理的逻辑设备形态,物理磁盘分割成虚拟磁盘,将虚拟磁盘深化采用细粒度管理和虚拟磁盘操作技术,从而获得更高更灵活的管理效率、性能和容量空间,通过虚拟化磁盘分配技术,提高磁盘利用率。存储虚拟化技术可以很好地解决当前各种形态设备的存储容量的统一管理和磁盘容量的动态分割,实现自动化管理,云存储中的存储设备数量庞大且基于网络的异地分布。现在的存储设备类型非常丰富,包括传统的存储设备如IPSAN、FCSAN、NAS、FCIP等,不同类型和形态设备之间的容量管理、设备管理,对于庞大的存储云来讲都是一个巨大的挑战,所有的存储资源都必须得到有效的管理和利用。采用虚拟化和存储池技术,可以把不同类型的存储设备虚拟化成为存储网络上的一个节点,在逻辑结构上消除异构形态设备的差异,把容量汇聚成一个巨大的虚拟存储池,并可以更容易地进行逻辑容量分割,大幅度提升存储效率。
3、统一的设备管理与资源呈现。云存储解决了多台存储设备叠加带来的设备管理问题。通过集群技术,将几十台、几百台的存储设备统一管理,通过统一的运维和管理界面,向用户呈现整个云存储系统的资源和设备使用情况:整体空间利用率、单设备空间利用率、读写带宽、设备负载情况、设备运行状态等。例如由二十台云存储设备构建的一个一千路视频10PB的云存储系统,用户在使用过程中,不需关心前端10000路摄像机的视频图像究竟是存储在哪一台设备上,只需要选择后端这个10PB大小的空间统一存储资源池,就可以非常方便的完成存储部署,可极大简化用户管理与维护的复杂度,有效提高工作效率;
4、提升设备资源处理和存储空间共享能力。由于设备处理能力、存储空间、带宽无法实现聚合,单台存储设备的处理能力和存储空间都无法与其他设备进行有效共享,而云存储系统则可以灵活的进行统一管理和共享。云存储采用统一的全局命名空间,可以提供多种数据访问接口(SOAP、REST、HDFS、POSIX等),支持主流的文件与数据传输访问协议(NFS/CIFS、iSCSI、HTTP、FTP等),可以与各种上层应用程序进行完美配合;
5、更高的数据安全性与可靠性。像宇视这样的行业优秀存储设备厂商已经通过模块化的部件冗余设计来实现单台存储设备的数据安全性和可靠性:双控制器、双电源、双电池、双风扇、双BIOS等;数据安全性可以通过RAID、镜像、快照、复制、CDP等技术实现。但是当存储设备自身出现故障或数据中心机房断电时,整个数据读写业务依然将无法交付。所以许多存储系统,通过灾备方案进行保障:同城/异地灾备、两地三中心、双活等方案来保证业务的连续性和可用性,但是在应对视频监控领域的海量数据存储,采用这些灾备方案明显难以实现(数据量过大,建设成本太高)。云存储除了单机性能及灾备之外,还通过NM纠删码技术实现网络RAID功能、多副本复制技术能够实现跨存储设备间的数据保护。如果某台存储设备故障,其上承载的数据写入业务都会自动转移到云存储系统内的其他存储设备上,对于数据读取业务,则可以通过其他非故障存储设备运算的方式或者访问副本的方式完成;
6、总拥有成本(TCO)较低。云存储系统采用高性价比的以太网络和存储节点构成,比传统的中高端存储设备具有更好的性价比优势。云存储扩容相对比较灵活,可根据业务随时随地的进行弹性扩展,用户不需要在建设初期一次性购买,当需要时可在线进行性能和容量的方便灵活的扩展,可以在建设、管理、运行、维护等上大大节省用户的总拥有成本(TCO)。
结束语
安防视频图像的存储特点是对实时的存储性能要求较高,而云存储的系统架构决定了它能够以较低的总拥有成本满足海量高清视频的并发写入/读取,并能实现快速配置和即插即用。目前云存储在平安城市、智能交通等大行业市场以及基于公有云架构的民用市场已经得到应用,今后随着网络化更全面普及和海量视频共享需求的快速增长,各行业的推广应用前景将更加广阔。
纵观整个国内外安防视频监控市场云存储厂商现状,数据存储厂商、安防存储厂商厂商云集、全力角逐:安防厂商基于对业务的理解顺势推出安防专用云存储,数据存储厂商力推通用云存储以期满足用户多样化需求,整个安防存储市场竞争日趋激烈。但是不管数据存储厂商还是安防存储厂商要做好安防云存储,都需要不断自我提升:数据存储厂商应该多了解安防视频监控业务,了解业务模型的差异,使通用云存储更符合安防视频监控行业的实际需求;安防厂商则应该在提供多种数据访问接口,满足用户多样化业务需求上多下功夫,相互取长补短,满足用户实际使用需求才是产品获得市场占有率的制胜法宝。而硬盘厂商也要针对安防视频监控存储市场提供容量更大、稳定性更高、具有更高性价比的硬盘产品,促使整个安防云存储的价格更加具有市场竞争力。
可以预见,随着越来越多基于海量数据的高清视频监控业务应用依托云存储架构解决方案,云存储在安防领域未来的市场应用将更加宽广。
本文转自d1net(转载)