云计算还方兴未艾,大数据就迎头赶上,成为今年最吸引眼球的高科技热点话题。与前者旨在帮助企业构建更高效、更灵活的IT环境不同,它更侧重帮助各类企业和机构从日趋海量的数据中迅速发掘高价值的信息,以提升其决策的效率和精准度,因而在一些时刻都在产生和收集大量数据,也需要及时处理这些数据来捕捉机遇的行业或应用领域中获得了追捧。
安防方面应用日渐广泛的视频监控领域,特别是大范围、涵盖多个视频数据采集点的视频监控就是目前对大数据青眼有加的应用领域之一。IDC中国的分析师在7月24日举办的英特尔大数据论坛上就曾指出,大数据技术已在一些地方政府主导的、将“平安城市”视频监控应用列为重要组成部分的智慧城市项目中有了实施。
这类项目为何会如此看重大数据技术的应用?来自2011年全球视频监控产品市场份额排名第一,并在安防领域拥有全世界最大规模研发中心的海康威视的答复或许就有足够的代表性:首先,其所产生的数据在规模还是结构上,都是符合大数据定义的——“‘平安城市’应用是视频监控领域规模最大、业务最复杂的系统,其视频接入规模从几千到几万甚至到十几万、几十万都有,它涉及到了治安监控、指挥通信、侦查破案、规范执法、社会服务等多个分区领域,”海康威视副总裁兼首席技术官蒋海青表示:“而且现在视频监控所采集的视频质量也从标清进步到了高清的时代,因此大家可以想象一个大型‘平安城市’项目所产生的数据信息量是何等之大。”
其次,“平安城市”视频监控采集到的海量数据也和其他种类的大数据一样,只有进行了智能、高效处理才更具价值。蒋海青指出:“传统的视频监控通常都需要人工监控,可人一般对视频只有20分钟的有效监控,之后注意力和关注点就下降了。”相比之下,智能化的监控技术不但不会像人一样产生疲劳,能够不间断的运行,而且它“还能从大量非结构化的视频数据中提取出有价值的信息,将视频监控的应用范围从过去和目前以事后查看为主,慢慢转变为事前预警,这就可以为公安、交通等各行各业提供更为有效的业务信息支持。”
上述这两个特点就确定了“平安城市”视频监控应用必将成为大数据应用,也决定了它需要大数据技术予以支撑。“我们也曾经想过用原有的关系型数据库来承载相关的数据和应用,但是关系型数据库已经没有办法支持海量的、而且是非结构化或半结构的数据。”蒋海青称,经过认真的评估与测试,海康威视最终选择了英特尔的大数据平台,而其核心就是具备大数据组织与管理功能的英特尔Hadoop发行版。
英特尔Hadoop发行版的优势,从英特尔公司公布的信息来看主要有三点:一是它与其他版本的Hadoop一样,能够为海量数据的存储、管理和处理提供灵活的支持;二是它相比于其他版本Hadoop针对英特尔架构硬件平台做了更多的优化;第三点就是英特尔基于开放的理念,可以为采用它的合作伙伴或用户提供全面的技术支持与服务,而且在英特尔这个开放的平台之上,合作伙伴和用户也可以更加自如地融入自己的创新。
这些优势,正是海康威视选择它来承载平安城市视频监控应用的原因所在。例如海康威视认为应用端需要的采集点很多、视频通道非常大,因此“处理平台不能是全集中式也不可能是全分布式,而应该是两者的结合”,而Hadoop的灵活性对此非常适用;又如海康威视要在Hadoop的数据管理和组织层上加入用于视频数据的图像处理、分析、分类技术,基于语义的分布式视频搜索技术来对它们进行挖掘,英特尔的开放平台也提供了充足的创新空间。而且,由于英特尔Hadoop发行版在开发过程中就已锁定了电信、金融、交通、医疗、制造等潜在应用领域,因此其开发团队早就着眼于智能交通监控的市场需求与海康威视开展了合作,在产品研发过程中汲取了海康威视的建议,因此能够为视频监控的大数据应用提供更为优化的支持。
在这些成熟条件的推动下,海康威视基于英特尔Hadoop发行版,并融合可以灵活按需调配IT资源对应用和服务进行支持的开放架构云计算技术,打造出了视频智能云计算方案。该方案目前已在某些城市的智能交通监控领域得到了应用,它不但可以掌控城市交通摄像头覆盖区域中任一车辆的行驶状态、运行轨迹,分析出其是否违章行为或有潜在犯罪可能性,而且还能对海量交通信息进行比对、分析和预测,实现车辆布控、拥堵状态服务、出行最优路径规划、交通管理服务等功能。
着眼未来,海康威视还计划将这一方案应用于小微企业或个人用户,例如将一些小店铺、连锁超市的视频监控通过云服务的方式整合起来,通过分析其视频监控数据提供潜在风险的预警。“这样的系统是完全基于互联网的平台,所以它的数据量可能比‘平安城市’的规模还要大,数据的采集、分析、存储及检索的难度还要高。”蒋海青称,海康威视相信英特尔先进的大数据平台,特别是英特尔Hadoop发行版的应用价值届时也将获得更多、更为全面的验证。