数据“沉睡”制约大数据产业发展 壁垒普遍存在于政企、企业之间

小到敲击键盘、迈开步子,大到征信系统、政务记录,数据已成这个时代最活跃的要素和最有价值的“信息矿产”。无论“互联网+”、物联网还是智能制造,数据的触角几乎无远弗届,影响着几乎所有产业生态未来的走向。

据中国信息通信研究院发布的《大数据白皮书(2016)》分析,未来五年,全球数据量将呈指数级增长。但庞大的总量却并不意味着完全有效的开发利用。《经济参考报》记者采访了解到,除了技术瓶颈外,开放和合作的障碍正在让大量数据陷入“沉睡”。数据原材料的缺乏与信息“孤岛”的形成,严重制约着大数据产业的发展。

壁垒让数据“沉睡”

国际数据公司(IDC)的数据显示,按目前发展趋势,预计2020年全球大数据总存储量将达到44ZB(1ZB约等于10000亿GB)。我国数据总量为909EB(1EB约等于1000亿GB),占全球数据总量的13%。

目前数据层面的壁垒普遍存在于政企、企业间,业内人士表示针对现状普遍是通过购买和“爬虫”(自动获取网页内容的手段)的方式获取,但数据存在不准确、不全和非结构化等问题。

“相比于行业间的数据流通,政企之间的壁垒更是一块沉睡数据的‘集聚地’。”中关村大数据产业联盟秘书长赵国栋说,“目前一些上市数据如股权占比、科研数据都是价值密度比较高的沉睡数据。”

据中国信息通信研究院2015年对国内800多家企业的调研来看, 企业内部数据仍是大数据的主要来源。当前有32%的企业通过外部购买数据;只有18%的企业使用政府开放数据。

业内人士指出,大数据时代的数据资源广泛散布于政府、行业、企业三个子系统中,其中,信息数据资源80%以上掌握在各级政府部门手里。而与此同时,区域部门间基本实现共享的省级地方仅占13%,区域部门间少量实现共享的地市和区县仅占32%和28%,信息共享和业务协同在地市和区县进展缓慢。

“如果更多数据可以开放,将会对产业转型、政务和公共服务效率提升等大有裨益。”上海至信普林科技有限公司总经理顾敏洁说,“比如中国人民银行上海总部自2006年起公开金融信息后,催生了一批金融信息咨询服务公司,其中还有5家上市公司,拉动的就业人数也非常可观。”

数据割据、技术壁垒和标准缺失形成数据孤岛

“数据孤岛的成因主要有三个,数据割据、技术壁垒和标准缺失。”赵国栋说。观念问题是主观意愿缺失的症结。“政府部门由于缺乏企业间基于共同利益开发这样的主观能动性,导致数据开放滞后。除了政府部门,一些大企业也应该认识到数据合理开放可以造就更好的社会和行业生态价值。”

外部管理规范、法规的缺失也使部分主体对开放数据保持顾虑。“目前如果只遵循‘谁的数据谁负责’这一简单的准则,要调动政府部门开放数据的积极性比较困难。”DT大数据产业创新研究院院长陈新河说。

除了主观意愿,技术和标准也是一道“硬门槛”。“比如目前信息共享的安全问题。公共云的运维工作面临着一些新的安全风险和挑战。计算环境从本地到云端的自身安全性是提高了,但由于公共云的运维管理工作必须通过互联网完成,和传统IT环境运维有很大不同,容易造成管理员权限被劫持攻击,造成运维管理账号和凭证泄露等问题。”顾敏洁说。

目前开放的数据同样因为格式标准缺失成了“开放的孤岛”。公布类似停车位数量、开放非标准化的图表等形式的数据都是不可机读的。这类“伪开放”并没有真正整合数据的价值。“不同行业数据整合必然需要标准化的数据格式,比如从卫生、人口的角度用数据对‘人’进行的描述就是不一样的。”全国信息安全标准化技术委员会大数据标准工作组成员张群说。

“因此目前要开放的应该是底层数据,而不仅提供根据数据分析出来的结果或产品。”业内专家表示,这类数据在技术上应该有其标准形式,可以被计算机抓取、调用,而且在法律上也是可以进行各种使用的。

开放整合数据需围绕应用场景

要打通数据孤岛,一方面是技术上的革新和标准化的推进,同时包括数据安全领域建设。“在物联网时代,需要从政府等层面推进包括身份识别、信息安全系统等庞大的安全体系建设。”赵国栋说。

“目前全国信息技术标准化技术委员会已推进获批了6项大数据领域的标准,包括了大数据技术参考模型、数据能力成熟度评价模型标准等。”张群说。

另一方面,在法律维度,立法推进的前提是明确数据权属。对此,赵国栋建议,可以参照土地管理的做法,将数据权属划分为所有权、处置权、使用权和收益权。“例如处置权应归国家,规定归档、删除的各种条件等。只有权属清楚才能推动法律保护。”

政府数据开放也并非一蹴而就,需要循序渐进。业内人士普遍认为,不涉及隐私和安全的数据可以率先开放,比如气象这类数据。同时政府部门和行业协会可以推动统一数据平台的建设,改变目前碎片化的现状。

杭州市经信委云计算与大数据产业处处长黄左彦说:“杭州整合数据、搭建平台过程中的经验就是以项目为突破,目前类似‘5G’车联网项目、城市数据大脑等都是以交通为突破点。由政府主导政务数据开放共享,企业自带资金深度合作开发,其中包括数据交流。”

“目前观念上有一个原则是被忽视的:即‘开放是常规,封闭才是例外’。”陈新河说,“政企间或者政府牵头整合数据仍应围绕应用场景、项目工程来,否则目前‘唤醒’的数据早晚也会重新‘落满灰尘’。”

本文转自d1net(转载)

时间: 2024-09-09 00:36:05

数据“沉睡”制约大数据产业发展 壁垒普遍存在于政企、企业之间的相关文章

制约大数据发展的核心因素是什么?

本文尝试从大数据产业链的各环节入手,谈谈当前制约其发展主要因素. 众所周知,大数据按照处理流程可以分为三步: 大数据采集和清洗 大数据存储和分析 大数据展现和应用 从以上这三个方面,我想谈谈制约大数据发展的几个核心问题. 一.大数据采集和清洗 1.1.数据法规:用户隐私如何保护.商业规则如何制定.法律规范如何制定等等一系列法律法规都大大滞后于大数据科学的发展速度.由于技术EXE所限,纸上谈兵TXT成为常态.当前数据法律法规未明,采集方式八仙过海,预计未来很多大数据业务都将会继续游走在灰色地带,只

数据成为甲方 大数据呼来大服务时代

本文讲的是数据成为甲方 大数据呼来大服务时代,近期,中国电子信息产业发展研究院(CCID)日前发布<2011年中国数据库软件市场研究报告>(以下简称<报告>).预测2012年中国数据库软件市场规模预计达到38.71亿元,将比2011年大幅增长20.6%,以人大金仓为首的国产数据库软件市场规模预计达到3.29亿元,比2011年增长26.5%,呈现爆炸式增长.报告指出预计到2020年,世界上的数据存储总额将达到35 ZB,大数据的应用将成未来数据库的必然趋势.同时报告认为,国产数据库要

2014中韩大数据论坛发现大数据的价值

ZDNET至顶网CIO与应用频道 06月06日 北京消息:2014年5月30日上午,由中国软件行业协会主办,北京软件和信息服务交易所(简称"软交所").中关村大数据产业联盟.韩国大数据学会.韩国经营信息学会联合承办的"2014第十八届中国国际软件博览会中韩大数据论坛"在北京展览馆正式召开. 2014中韩大数据论坛"发现大数据的价值"主论坛现场嘉宾 中国软件行业协会秘书长谢渡婴,韩国大数据学会会长吴在仁,软交所副总裁刘东华.中关村大数据产业联盟秘书

“大数据管理局”让大数据共用共享

近日,广州市政府官方网站公布了工信委.商务委和国资委3个部门的"三定方案".三个部门共"定编"339名,其中商务委编制最多,占比超4成.机构设置方面,工信委下设的广州市大数据管理局(正处级)颇具创新,其承载着建设工业大数据库等9项重要职责.   城市发展到了今天这么大的体量,社会治理模式也需要不断升级.大数据,无疑是一个重要的发展方向.随着网络的普及,越来越多的行为在网上发生,"凡走过必留下痕迹",有的商业数据公司将其收集起来,分析用户情况,还能

2014中关村大数据日看大数据变现

大数据从最初概念的提出到成为像土壤.矿藏一样的资产,如何获取数据资产?如何利用数据资产推动行业创新?如何实现数据资产的增值和变现? 12月11日,2014中关村大数据日在中关村软件园云广场酒店如期召开,并通过纽约时代广场大屏幕同步呈现.大会以"聚合数据资产,推动产业创新"为主题,探讨数据资产管理和变现.大数据深度技术以及行业大数据应用创新和生态系统建设等等关键问题.大会还承载从政府主管部门到各行各业的需求和实践中的疑问,探讨包括政府.金融.运营商等部门是如何通过数据资产管理和运营,实现

2016十大数据观 揭秘大数据产业路向何方

2016年,是我国大数据产业市场规模明显增长.技术创新与应用创新特征凸显.地方政府结合需求推动顶层设计.行业应用成为新热点的一年.接踵而来的2017年,立足于上述发展基础,大数据产业将持续发力.基于对过去一年产业发展中政府数据公开共享.应用落地.大数据与信息化分野等问题的深度思考,九次方大数据创始人王叁寿提出了十个与众不同的数据观,从中不难窥探出未来大数据产业发展的走势. 一.政府数据将成为地方政府最重要的资产 政府手里最值钱是土地和数据,数据是可以反复利用的,政府数据一旦释放,所产生的价值要比

启动数据立法 使大数据资产促进创业创新

3月5日,<国民经济和社会发展第十三个五年规划纲要(草案)>正式出炉,"国家大数据战略"被写进了备受关注的"十三五"规划纲要(草案).对此,全国人大代表汪宏坤,盘古智库学术委员.优客工场创始人.中国科协全委委员毛大庆在今年全国两会上提出了"启动数据立法,使大数据资产促进创业创新"的建议.毛大庆表示,"当前,大数据已成为国家基础性战略资源,是未来的核心竞争力,创业创新的发展离不开可靠的数据系统的支撑". 启动数据立法

张新红:数据开放是大数据战略的突破口

本期光明网理论学术动态导读关注数据开放.网络安全.乡村治理.农村公共文化."扶教".军事"标准化"等话题,欢迎网友踊跃参与讨论. [张新红:数据开放是大数据战略的突破口] 国家信息中心信息化研究部主任张新红指出,建立大数据的基础设施,可以让经济增长潜力迅速迸发出来,这是因为公司可以用这些数据创造价值,进而可能创造新的服务行业.数据已经在那儿了,开放没有什么成本,赢得的却是新的发展机会.需要说明的是,大数据战略中的数据开放,与我们常说的信息公开有所不同.以往的信息公开

青岛推动大数据发展 政务大数据云中心2018年建成

日前,该市发布<关于促进大数据发展的实施意见>,以加快推动本市大数据健康发展和广泛应用,大力发展大数据产业,强化大数据对政府治理.经济转型.社会服务的支撑作用,大力推进数据资源跨地区.跨部门.跨层级.跨行业交换共享,推动公共数据向社会开放,鼓励社会数据资源流通,加快公共数据与社会数据相互融合和增值开发利用.一体化的政务大数据云中心.大数据交易中心.公共信用基础数据库.多位一体平行交通运用示范工程--大数据将颠覆未来你我生活. 一.政务大数据云中心2018年启用 意见提出,到2018年,该市基本