大数据发展谨防"一哄而上" 警惕大数据应用陷阱

马云曾说,“我们还没搞懂PC互联网的时候,移动互联网来了。我们还没搞懂移动互联网的时候,大数据来了。”作为近几年来最热门的网络概念之一,大数据在多个领域的落地显示出其巨大优势,如出行类APP在城市中为用户提供快速的车辆调度,又如谷歌智能系统阿尔法围棋在人机围棋大战中获胜。然而大数据应用喜忧参半亦是事实,曾作为大数据具备革命性潜力证明的谷歌流感趋势近几年的预测结果并不尽如人意。

大数据是否被过度热炒?现行大数据分析是否可靠?这些疑问在大数据已作为国家战略被写进“十三五”规划纲要的当下迫切需要得到解答。北京大学国家发展研究院教授沈艳在接受海外网专访时强调,在明确大数据局限性和可行性的基础上,大数据产业才能够扎实发展。

警惕大数据应用陷阱

尽管大数据的定义见仁见智,但其海量的数据规模、动态的数据体系、多样的数据类型等是业界的共识。沈艳表示,大数据能够以前所未有的精细度描画世界,如运用得当,能够帮助人们快速刻画新旧经济更替,给予产业发展方向以可视化指导,并为政府决策提供参考。

但是,大数据应用也面临陷阱,沈艳表示,“有一种看法认为,有了大数据就有了总体,就不再需要科学抽样了。”这种“大数据自大”倾向之所以值得警惕,一方面在于,数据反映的信息可能只是总体的一部分;另一方面,总体可能会在时间推移中发生变化。例如,“使用谷歌搜索流感相关信息的用户”和“美国流感人群”这个总体并不完全重合,因此用后者预测流感趋势存在先天不足。

陷阱的出现与大数据的收集方式息息相关。沈艳指出,传统数据或者来自问卷调查,或者即便是经营活动留下的数据,也往往有规范标准,使得数据含义前后可比。而大数据更多是生产经营等各类活动的附属产品,当服务于主营业务的系统架构不断变化,数据生成规律将随之变化。而数据分析方很可能对此全然不知或不能深刻体会,沿用以往的分析方法,就很容易产生结论的偏差。

分析大数据需要人才

“当新技术来临,尤其是面对经济新旧转型,我们迫切需要新的增长点,很容易未经深究就相信新技术的力量。但实际上只有在清晰地知道它各种各样局限的基础上,我们才能去用它。”这是沈艳对当前大数据运用的看法。

对比美国大数据产业图景(分为架构、分析、应用三部分),沈艳发现,“十三五”规划中大数据战略的内容集中在架构和应用部分,比如加快政府数据开放共享,进行海量数据采集、存储、清洗、分析发掘、可视化等领域关键技术攻关。

她指出,应加强对大数据分析的重视,包括回归问题本源,进行数据可行性分析等,也表示并非所有企业都有能力进行大数据分析。“数据分析具有门槛,要防止一哄而上、不管是否适合自己都要赶上潮流。”沈艳坦言,即便没有遵循科学规范的分析方法,一些大数据产品也能够在一定程度上解决问题,但是其商业模式是否真正可行、是否能够持续很难确认。而且若导致重要领域出现问题,可能产生重大损失。

而目前的一大桎梏是大数据分析人才的紧缺。沈艳认为,人才培养触及产业健康发展的核心,大数据发展亟须既懂关键技术又懂专业领域的跨界人才。此外,国家还需对决策者和民众有相应的培训投入。

采访中,沈艳仍然对大数据前景充满信心,她期待大数据产业帮助中国的新经济成长起来,让中国持续成为世界经济的引擎。

本文转自d1net(转载)

时间: 2024-08-01 21:54:03

大数据发展谨防"一哄而上" 警惕大数据应用陷阱的相关文章

回顾2016年大数据发展,盘点十大热门数据岗位

随着很多大公司对数据分析需求增多,数据相关岗位的人才需求量也越来越大. 数据学作为一门学科,已经受到时代的追捧.数据学,或者更准确来说,大数据,在2000年早期还是个冷门,而现在早已成为人们关注的焦点.早在2014年,高德纳咨询公司就预测,到2016年将有73%的公司企业将在大数据项目中投入重金. 2016年的尾声即将到来,我们是时候回顾一下大数据的发展,盘点十大最热门的数据岗位. 随着很多大公司对数据分析需求增多,数据相关岗位的人才需求量也越来越大. 数据学作为一门学科,已经受到时代的追捧.数

透析国家安全视野中的大数据发展问题

近年来,我国所面临的外部安全形势日益严峻.以习近平同志为总书记的党中央在治国理政的实践中高度关注国家安全问题,成立了中央国家安全委员会并由党的总书记亲自担任主席,确定了每年4月15日为全民国家安全教育日,亲切接见了全国国家安全机关总结表彰大会代表,组织编写了<总体国家安全观干部读本>,体现了新一届中央领导集体对国家安全的高度重视,使得以爱国主义为核心的民族精神充分彰显,让广大人民群众在精神上为之振奋.习近平总书记关于"必须坚持总体国家安全观""国家安全是头等大事&

魏凯:如何突破大数据发展的瓶颈

大数据已经上升成为国家战略,社会各界对大数据的期待上升到了前所未有的高度.如何务实推动大数据战略落地,成为接下来的政策重点.本文重温了大数据的内涵,分析了大数据的局限性,结合国内大数据发展面临的瓶颈,提出了相关的策略建议. 1引言 2015年,我国<促进大数据发展行动纲要>出台,十八届五中全会进一步提出要在"十三五"期间实施国家大数据战略,大数据一路上升成为国家战略,社会各界对大数据的期待上升到了前所未有的高度.如何推动大数据战略落地成为未来几年的政策重点.本文重温了大数据

水利部印发《关于推进水利大数据发展的指导意见》的通知

部机关各司局,部直属各单位,各省.自治区.直辖市水利(水务〉厅(局),各计划单列市水利(水务〉局,新疆生产建设兵团水利局: 为贯彻落实<国务院关于印发促进大数据发展行动纲要的通知>(国发[2015]50号〉精神,推动数据资源共享开放,促进水利大数据发展与创新应用,水利部网络安全与信息化领导小组办公室组织编制了<关于推进水利大数据发展的指导意见>. 现印发给你们,请结合实际贯彻执行. 水利部 2017年5月2日 关于推进水利大数据发展的指导意见 党的十八届五中全会明确提出实施国家大数

促进形成各方联动的大数据发展格局

工信部信息通信发展司司长闻库在第十三届中国信息港论坛的"大数据与云网络"专题峰会上指出,当前全球信息通信技术迅猛发展,互联网向经济社会各个角落渗透,一个大规模产生.分享和应用数据的新时代已经到来. 闻库表示,目前,我国大数据创新创业日趋活跃,大型互联网企业已将大数据应用于网络社交.电商.广告等业务领域.电信.金融等行业基于大数据推出了风险防控.信用评价等应用,大数据市场总体规模已接近100亿元,全社会形成了大数据应用发展的良好氛围.另一方面,网络基础设施支撑能力大幅提升,大型数据中心向

先行先试创新大数据发展体制

党的十八大以来,以习近平总书记为核心的党中央提出并确立了"创新.协调.绿色.开放.共享"的五大发展理念.近年来,贵州省大力实施大数据战略行动,建设国家大数据(贵州)综合试验区这一国家级平台,在经济社会发展各领域开展大数据发展应用先行先试工作,以创新探索践行五大发展理念. 以创新引领欠发达地区后发赶超 习近平总书记指出,科学技术越来越成为推动经济社会发展的主要力量;大数据等现代信息技术深刻改变着人类的思维.生产.生活.学习方式,深刻展示了世界发展的前景;全党全社会都要充分认识科技创新的巨

出现重复建设苗头 大数据发展莫入歧途

大数据以其"浅显易懂"的概念和预想中的巨大应用前景,成为了继云计算.物联网之后信息技术领域的又一热点.但在各界的加倍关注中,国内大数据领域的明显进展未现,却已经显示出或多或少的"泡沫".借大数据之名圈钱圈地或进行重复建设的苗头已然出现.这种情况下,需要深化对大数据内涵与特征的认识.基于对大数据的跟踪研究,赛迪智库认为,可重点从四个方面进行认识和把握. 大数据发展的重点在于对数据对象的分析与应用 曾听到专家对某地方政府领导建言,建设大规模的数据中心,备份存储用户的数据

全国首部《大数据蓝皮书》指出:中国大数据发展呈现十大新趋势

大数据战略重点实验室研究编著.社会科学文献出版社出版的<大数据蓝皮书:中国大数据发展报告No.1>(简称<大数据蓝皮书>)5月28日正式发布.作为全国首部<大数据蓝皮书>,从制度.技术.产业和学科建设等层面对大数据的发展进行分析与研判,并提出中国大数据发展的十大新趋势. 趋势之一:丰富细致的政策体系助推大数据落地.从中央到地方,更加丰富的配套政策与实施细则将促进大数据加快落地,更多地方政府积极推进大数据发展,并在大数据政用.商用.民用领域打造大数据应用的典范. 趋势之二

物流行业的大数据发展与应用

随着大数据时代的到来,大数据技术可以通过构建数据中心,挖掘出隐藏在数据背后的信息价值,从而为企业提供有益的帮助,为企业带来利润.面对海量数据,物流企业在不断增加大数据方面投入的同时,不该仅仅把大数据看作是一种数据挖掘.数据分析的信息技术,而应该把大数据看作是一项战略资源,充分发挥大数据给物流企业带来的发展优势,在战略规划.商业模式和人力资本等方面做出全方位的部署. 所谓物流的大数据,即运输.仓储.搬运装卸.包装及流通加工等物流环节中涉及的数据.信息等.通过大数据分析可以提高运输与配送效率.减少物