你造吗?视频监控将是世界上超级大数据生成器

  记得几年前看过一部电影,威尔史密斯主演的《国家公敌》,影片中美国的各个角落充斥着摄像机,CIA可以随时调用这些摄像机进行追踪,无数的摄像机形成了一张超级大网……当时觉得有点科幻也有点背寒。

  不过短短几年,这已经成为了现实,成百万的摄像头已经联网,给我们的人财安全、交通出行带来了非常多便利,但这仅仅是开始,实际上,现在的技术已经能够很轻松地进行智能识别、人流计数甚至行为识别等,这庞大的视频数据分析比传统互联网数据更接近于真实的世界,这个潘多拉盒子的里面,究竟会带来什么?

  视频监控将是世界上最大的数据生成器

  2012年这个世界上增加了2.8ZB的数据,相当于30亿TB。如果视频数据也存储下来,这个数据就要翻倍了。

  以国内某省为例,公共视频监控已经超过100多万个摄像头,总保有量近400万,以此估计,全国摄像头数量不少于4000万,某投行的报告称行业每年还在以20%加速增长,行业龙头海康威视12年的年报披露的销售量就达570万套(含前后端),增长37%。而另一个数据也很惊人,英国的摄像头数量与人口数量之比已经达到1:15。粗略计世界至少有1亿个摄像头在角落静静的看着。

  如果这些数据存储下来,将是超级大数据。假设所有摄像头换为1080P,每天的数据量是64G,每年的数据量是23T,全世界每年将产生23亿T的视频数据。

  这是个可怕的数字。不知是有幸还是不幸,绝大部分视频监控数据存储不会超过一天,因为从目前看来,与存储的价格相比,这些数据不值钱。

  正在形成的超级视频监控云

  视频监控已经不再是以前那样,几个摄像头连到大楼保安室,只有进入这个神秘的房间才能一窥究竟。实际上,监控摄像头已经成为了智能终端,有网口、能控制甚至可接双向音频,摄像头的互联已经成为趋势。

  例如公共视频,已经从一个城市内的互联,发展到一个省的互联,逐步到一个国家的互联,无论是新的网络摄像头,还是旧模拟摄像头+DVS/DVR,都开始加速接入一个庞大的云平台,从单纯的视频流媒体数据到云台操作,每一个终端都成为了一个可被远程控制的智能化终端。而另一端,这些数据又被包装成各种公共应用向公众开放,看看媒体里充斥着多少手机可实时查看城市道路交通视频的新闻。

  除了公共视频,无数私有视频也在形成私有云,分支庞大的连锁超市、连锁酒店、物流公司、金融机构甚至工业生产线,无数端点的数据正在向云汇集。而不少国家也要求私有视频数据也要定向开放,可被调用和操作。

  这正是与互联网不同的物联云网络,从感知到互联到应用,只不过这个感知是用无数的“眼睛”看世界。

  欢迎进入“楚门的世界”。

  视频大数据的价值还未发掘

  一般看来,视频的冗余数据太多,只有发生了突发事件才会回看记录,所以大部分视频数据的存储很短,超过一周的少之又少。而另一方面,由于数据读写要求高,云端存储极为昂贵(几千元1TB),所以绝大部分数据都是存在前端。

  视频智能分析的初衷就是要解决冗余数据的问题,把人从枯燥的监控中解放出来,帮助人更好的眼观六路。所谓智能的核心就是目标识别和行为分析,按照应用的要求设定规则,当视频中的信息符合规则时才进行告警和记录,常见的应用包括入侵检测、周界告警、车辆识别、交通违法监控等。

  目前行业主流的智能分析厂商,如国外的ObjectVideo、ioimage、Emza,国内的卓扬科技、文安科技、智安邦科技等,基本都是围绕 “监控”二字,属于视频数据的初级加工,一般只是对单个摄像头的视频信息进行实时处理,按一定规则产生事件数据(如告警事件、车辆计数),跨空间和时间范围的二次加工分析还比较少,因此,视频监控领域并未真正的形成互联网意义上的大数据。

  不过视频监控数据必定能成为下一个大数据的宝库。一方面,它具备了典型的大数据4V特征,数据量巨大、多样化、表面上无序、但暗含着无数人和物的行为。另一方面,它是真实世界的写照,这与互联网获得的大数据有很大不同,真实世界蕴含了无数难以用格式化文字表达的信息,比如人通过视觉可以快速形成判断,一个地方是繁荣还是衰退,气氛是紧张还是欢快。

  当然,前提是,存储成本能降下来,数据处理能力能升上去。

  潜力巨大的应用

  比如对于一个商场,除了对安防的需求之外,对视频数据的二次挖掘,可以搜集顾客的性别、年龄、穿着信息,可以统计顾客的购物路径、停留模式、聚集热点,甚至可以二次或者多次回头率、到店周期等。这类似于网站访问分析,能为商场的优化提供基础数据。如果是连锁型企业,还能结合多店的数据,获得区域性甚至全国性的数据。

  同样放大到一个城市,每个街道的人流数据、车流数据都在其中,这些数据整体汇集起来,就是一个城市的人车分布图,静态的如不同区域人的特征、车的特征,动态的如人车的路径、停留模式,这对城市的规划和管理都极有价值。

  如果再结合到时间线,从无数摄像头收集到的信息,还可以看出一个国家、一个区域、一个城市的变化,如同《大数据》里所言,甚至可以预测趋势,比如是否更多的店铺在新装修开张还是更多的歇业,是更多的饭店还是更多的服装店等,这些变化汇集起来我们可以看到人口的变化、经济的趋势、潮流的趋势、自然环境的变化甚至人的快乐和紧张程度。

  这不是天方夜谭,现在的技术已经完全做到。一方面高清摄像机的普及,视频信息质量更加优良;另一方面,智能分析的水平已经相当的高,对物品的识别和分离、对人脸的识别、对颜色文字数字的识别、对物体变化的分析甚至还有暴力行为的监测。

  但要实现这种意义上的数据挖掘,需要进行大量元数据的记录,甚至是与监控目的无关的元数据,要多维度的进行分析,需要海量的数据汇集存储和超大规模的数据处理,最后还需要基于位置和时间的进行关联性分析整合,这巨大的资源和成本耗费是打开大数据之门的障碍。

  技术和人性的冲突

  一周前Google宣布,在有效的隐私保护机制完善之前,禁止Glass APP使用人脸识别功能。此前,Google 因为 Glass 的隐私政策曾经遭受过国会议员的质询,其中包括了面部识别是否会侵犯用户隐私、Google Glass 是否会收集用户信息、Google 如何保障用户数据等方面的问题。

  视频监控也一样涉及隐私问题。视频监控中人脸识别的技术也已经相当成熟,如果存储够大、处理够强,在无数的云数据中进行人脸搜索同样可以产生非常多有意义的应用,比如搜索走失的小孩,未来只需要输入照片,就能大范围的进行智能搜索,这比靠人海战术有效的多。

  但是这对隐私的侵犯是难以绕开的痛,国内在这方面的法规还是空白,例如之前微博爆出的“摸奶门”就是典型的公民隐私被侵犯的事件。在监管上亟待明确谁可以建摄像头、哪里可以建、数据怎样保存、怎样保障信息不外漏。

  不过在现实中,摄像头的迅猛增长已经昭示,公民隐私还是让位与公共管理,但是随着视频监控云的形成和走向云存储,数据的威力越来越大,通过云数据,甚至可以描绘出一个人的生活轨迹、兴趣爱好,TA喜欢去哪些店铺,在哪里活动,服饰爱好如何,经常跟谁在一块儿……原本只有上帝能看到的,云都在看着你。

  技术的进步总会带来新的挑战,未来睿智的人们必定会想出隐私的保护方法,只有你的授权才能查看你在视频里的存在,或者,我们的三观进化了,适应了技术的发展。

  世界本来就是舞台,上帝正在云端微笑。

时间: 2024-10-17 19:31:10

你造吗?视频监控将是世界上超级大数据生成器的相关文章

公共安全视频监控的5个创新技术大预测

公共安全正成为中国政府日益关注的焦点话题,公共暴力犯罪成为近年屡见报端的突然恶劣新闻事件.人口众多,发展不平衡导致的一系列社会问题正在加剧这个过程,所以加强公共安全的视频监控建设已经迫在眉睫,更多的资金也投入到公共安全的建设中来,由此带来的市场竞争所引发的技术竞争也就接踵而至.未来前景究竟如何?公共安全视频监控的5个创新技术大预测! 智能分析.云计算.云存储和大数据挖掘等众多创新技术对公共安全领域的技术革新产生了深远的影响.随着视频监控技术和公安业务需求的不断发展,公共安全领域对视频监控的规划和

如何在云上实现大数据项目

云计算和大数据目前都是热门话题,如何把两者结合起来即在云上实现大数据项目,这是一个新的实践领域.资深数据专家David Gillman根据自己的经验,列举了云上大数据方案需要考虑的基本要素,包括对数据构建实时索引.自由模式搜索与分析.监视数据并提供实时警告等,帮助用户更好地评估和选择解决方案. 在谈到如何实现云上大数据项目时,David强调了三个实时要素,即实时索引.实时数据和实时监控.具体来说,实时索引指的是"对所有机器数据创建通用的实时索引": 这是大多数人所认为的大数据的核心;它

阿里CTO:阿里是世界领先的大数据公司

本文讲的是阿里CTO:阿里是世界领先的大数据公司[IT168 云计算]不论是人工智能还是其他前沿技术,都离不开高质量的数据.强大的计算平台和高效的算法平台."阿里巴巴集团CTO张建锋在西雅图表示,"只有这三件事放在一起,才能真正在机器学习和人工智能领域取得突破." ▲阿里巴巴集团CTO张建锋 8月6号,阿里巴巴在西雅图举办技术论坛,有近400名当地的技术人才参加,除了有架构.中间件.搜索等技术负责人到场介绍干货,阿里CTO张建锋也第一次在美国分享阿里的技术战略. 张建锋花名行

张建锋:阿里是世界领先的大数据公司

文章讲的是张建锋:阿里是世界领先的大数据公司,不论是人工智能还是其他前沿技术,都离不开高质量的数据.强大的计算平台和高效的算法平台.阿里巴巴集团CTO张建锋在西雅图表示,只有这三件事放在一起,才能真正在机器学习和人工智能领域取得突破. 8月6号,阿里巴巴在西雅图举办技术论坛,有近400名当地的技术人才参加,除了有架构.中间件.搜索等技术负责人到场介绍干货,阿里CTO张建锋也第一次在美国分享阿里的技术战略. 张建锋(花名:行癫)加入阿里12年,亲历了淘宝.天猫.聚划算组成的中国零售平台一路发展成全

用Roadrunner如何上传大数据文件

问题描述 用Roadrunner如何上传大数据文件 选择一个或多个文件(最大有5G),上传到服务器,用LR应该怎么实现呢? 解决方案 ?public String readFile() throws IOException??? {??????? File rFile = new File("c:/jdk1.5.0_14.rar");??????? File wFile = new File("e:/jdk1.5.0_16.rar");??????? try {??

如何在客户端上读取大数据文件(NetCDF格式)

问题描述 如何在客户端上读取大数据文件(NetCDF格式) 小妹这里遇到一个技术问题,请各位大牛不吝赐教啊. 我们现在在做一个小网站,主要实现在客户端上传NETCDF文件,然后再服务器端读入,并对读入数据进行一系列运算后,向客户端返回运算结果,并在客户端显示出来. (NETCDF文件是一种科学数据的文件格式化,需要通过NetCDF 接口函数库来读取文件) 现在我们遇到一个问题,由于NETCDF文件数据量太大(几百兆左右),在服务器端读取NETCDF文件花费的时间太长,影响了页面的操作效率,所以我

手腕上的大数据 打响可穿戴只能设备第一战

在Google Glass和iWatch的带动下,关于智能设备的未来,网上出现了各种靠谱和不靠谱的假设,其中大有"未来智能手机会不会像BB机一样被淘汰?"的类似问题,当然,"淘汰说"属于各种假设中较为激进的一种. 目前已经问世和即将问世的可穿戴设备,细数起来基本包括四大类:1.运动和健康辅助的Jawbone Up.Nike+ Fuelband.Fitbit Flex以及国内的咕咚手环.大麦计步器等,2.可以不依附于智能手机的独立智能设备iWatch,以及即将面世的果

可穿戴智能设备第一战:手腕上的大数据梦

"未来智能手机会不会像BB机一样被淘汰?"在Google Glass和iWatch的带动下,关于智能设备的未来,网上出现了各种靠谱和不靠谱的假设,"淘汰说"是其中比较激进的一种. 细数目前已经问世和即将问世的可穿戴设备,基本包括四大类:1.运动和健康辅助的Jawbone Up.Nike+ Fuelband.Fitbit Flex以及国内的咕咚手环.大麦计步器等,2.可以不依附于智能手机的独立智能设备iWatch,以及即将面世的果壳智能手表,3.作为互联网辅助产品的G

高淳农民种养殖 用上气象大数据

高淳区首批6个"气象为农服务"共建示范点日前授牌,范围覆盖该区水阳江沿线等养殖区,覆盖区域的农户从此可用上气象大数据种地.养螃蟹.养鱼养虾. 据悉,这些"气象为农服务"点将定点向农户推送即时气象信息,对有特殊气象需求的农户开放气象数据库查询服务,同时尝试开展农业气象大数据应用,通过历年丰欠年景的气象数据比较分析,为农户提供精准气象数据信息,帮助农户掌握农时先机. 高淳区气象局负责人说,这些"气象为农服务"点全部由气象部门和农民专业合作社联手打造,