大数据真的靠谱吗?

  互联网的普及,使得近几年全世界的信息量呈爆炸式增长,而物联网时代的到来,更是增加了网络的信息负载量,这些信息结织着网络的每一个结点,成为一个个数据,“大数据”随之进入人们的视线。

  在左派">技术管理者的眼里,大数据就像是机器猫的四维口袋——无所不能,如今,许多大数据技术,如数学模型、预测算法和人工智能软件等已经被广泛应用。从日常生活到商业、体育、医疗,甚至到军事领域,所有与数据相关的难题,只要从“口袋”里掏出相应的信息工具加以分析,就能够解决。

  然而,正如马克?吐温、威尔?罗杰斯和查尔斯?凯特林等人颇具嘲讽意味的妙语所说:“引领我们进入困局的并不是我们不知道的事物,而是我们知道、但不那么真实的事物”。我们自以为熟知的大数据,也许并不如我们看上去那么真实透彻。

  在大数据之前,互联网领域就曾经出现过引领人类陷入困局的“真假事件”:90年代的真假互联网使得各种互联网概念股横行;2003到2005年的真假ISP,概念的混杂搅浑了整个行业;以及之后出现的真假媒体、真假电子商务等等。因此也有专家指出,从2012年到3721.html">2014年必将出现大数据领域的混战。真假大数据的辨别不应该被忽略。

  当前确定我们数字世界的数据算法和分析过于简单,不够智能。数学模型是一种简化的模型,基于自然科学、物理定律、流体中的粒子行为等等这些数据预测可靠性也许是可观的。但是人类是一种复杂的生物,人类行为的随机性很大,因此,对于人类行为的分析出现“非样本错误”的概率也就大大增加。

  所以,大数据固然重要,但是直觉仍然不可或缺,许多包括技术局限和人为因素的存在都制约着大数据分析的可靠性。人类对于社会认知的能力目前还无法被人工智能所替代,社会关系分析、上下文情景分析等等,都是目前大数据还未能精确触及的方面。

  除了技术的不完善以及人类行为的不确定性之外,大数据等资源无法实现充分共享也是影响其可靠性的重要因素。每一个人看待事情的角度和关注点不同,对于信息的采集点也不同,但是每一个人又都是不完美的,缺失难免存在。日前,北京微动利投资管理有限公司的副总裁黄嘉粤先生在接受记者采访时也提到:“每个公司都要做一套大数据,实际上成本很高的,还不如你有数据我买数据,或者说你有数据我们对接数据,这样的话,其实才是真正的云数据。企业之间实现数据资源的共享,才能更好地避免单方信息的片面性。”

  可见,在大数据时代信息量爆增的情况下,“信号与噪声”并存,要想利用大数据做出更为准确的预测就必须学会辨别“信号与噪声”,做到不让“噪声”误导。同时,“信号”之间的共享,也能够更好地为数据信息“验明正身”。

  当然,目前大数据给人类生活带来的诸多裨益已经有目共睹,而人类、数据集和分析算法的协同进化才能使得大数据创造出更多新的价值和财富。

时间: 2024-10-25 15:11:30

大数据真的靠谱吗?的相关文章

大数据真的会让医疗更美好么?

医药行业科技发展落后了数十年之后,如今真正走入了它的大数据时代.手机技术.传感器.基因组分析以及分析软件的开发使得大量个人信息的捕获成为可能,包括人体的组成以及周围的环境,这些信息共同改变了医药行业.行业目标从大众化治疗变为了个性化诊疗,治疗的可控性增强,这对于医生和患者来说无疑是个利好消息. 据麦肯锡顾问公司推测,隐藏在这些医疗数据中的商机可能高达每年3000-4500亿美元. 麦肯锡顾问公司曾建议苹果.高通.IBM公司投资科技产业,小至智能手机应用程序,大到价值十亿美元的分析系统.而一些刚创

社交网络+大数据真的用来可以模拟一个活人吗?

最近在B站恶补了一部几年前的英剧.<黑镜>(Black Mirror). 这片子风格奇特,每一集都独立成篇,讲一个完全架空的故事.其题材天马行空无迹可循,所以我一直是拿它当英国版的<世界奇妙物语>来看的. 其中第二季第一集让我脑洞大开: 故事说的是一对彼此深爱的夫妻,某日丈夫出门后就再无音讯,直到警察上门妻子才道丈夫出车祸死了.原本甜蜜平静的日子突遭飞来横祸,妻子痛不欲生. 在葬礼上,妻子的闺蜜偷偷告诉她,为了帮助她度过这段感情上最艰难的时期,已经为她注册了一个新的互联网虚拟服务.

大数据理财靠谱吗?京东和阿里各贡献了一个例子

大数据早已成为互联网行业里说烂的概念.从赛事比分预测到新闻推荐,再到商品的导购,几乎都有人与它关联起来.理财产品,也不例外. 从去年 4 月,阿里招财宝的招财一号推出,至今已近 1 年.这个自称全球首只用上电商大数据配置股票的基金.近三月来的净值增长率是 0.91%,自成立以来增长率则为 -0.3 %. 当招财一号刚发布的时候,听上去是很有道理的一个产品.其超过 60% 的投资都会放在牢靠的固定收益产品上,剩下的部分则会根据阿里巴巴的淘金 100 指数进行配置. 淘金 100 指数利用其在电商领

大数据真的在云计算上的快车上吗?

软件初创厂商AtScale公司去年年底发布了其年度大数据成熟度调查报告(以前称为"Hadoop成熟度调查"),显示商业智能大数据是首要任务,并正处于云计算的快速发展阶段,数据治理越来越受到关注. 该报告及其结果在最近ODPi用户顾问委员会(UAB)的会议上成为了一个主要的讨论话题,ODPi用户顾问委员会(UAB)是由来自汽车,技术和娱乐行业等使用Apache Hadoop和其他大数据技术的大型企业的代表组成.ODPi UAB十分认同报告中所提出的日益增长的数据治理问题.自助服务访问大数

小米式大数据更靠谱

小米论坛在短短四年时间里,拥有注册用户2000万,总发帖量超过两亿条.其中,操作系统MIUI就收集到上亿个用户反馈贴,帖子打印出来的纸张可绕地球一圈.两亿条用户反馈贴,是不是大数据呢?当然是,都是客户意见.建议的真实表达,都是需求.问题的直接陈述,是含金量极高的大数据,是许多手机厂商艳羡的大数据. 被冠以"小米口碑营销内部手册"的<参与感>对大数据只字未提,笔者也未搜索到雷军在公开讲述小米模式时提及大数据.但这不表明雷军不重视大数据,作为全国人大代表,他2014年的提案就是

大数据真的可以让航空情报人员“未卜先知”?

在民航航班的运行中,飞行员需要依靠航图.导航数据.起降机场资料等航空情报信息,完成相关飞行任务.随着民航业的快速发展,航班越来越多,航空情报的服务视角逐步从单纯的数据提供转向航空情报管理.在大数据技术日臻成熟.大数据时代已然到来之际,航空情报管理工作大有可为. 新发展要求新转变 航空情报工作直接关系着飞行安全.在国际民航界,由于航空情报失误影响飞行安全的事例并不鲜见.既有因情报员提供的通信资料不准,造成飞行员使用了错误通信频率,低空通信中断的情况;也有由于空域临时变化的信息传递不及时,致使空中飞

当大数据真的变得更好时

以往的经验告诉我们,充分发挥扩展优势会带来更大的分析价值.但是大数据[注]并不是一把万能的锤子,而每一个问题也不是一个靠锤子就可以解决的钉子. 许多人认为大数据意味着越大越好.人们也常常从各种哲学视角来诠释"越大越好"这一问题.对此我将这些角度归纳为: 信仰:是指容量更大.速度更快和种类更丰富的数据总会带来更多洞察力,而这正是大数据分析的核心价值.如果我们无法发现这些洞察力,那是由于我们没有充分认真地尝试,或是我们的灵活程度还不够,或者是我们没有使用正确的工具和解决方案. 偶像:是指数

大数据预测的世界杯靠谱吗?

问: 今年大数据取代了章鱼保罗,成为预测世界杯战局的热门手段.不过这种预测靠谱吗?大数据真的能预测世界杯? 答: 目前采用http://www.aliyun.com/zixun/aggregation/13568.html">大数据技术预测世界杯的,既有百度这样的互联网公司,也有德银这样的知名投行. 一.预测确实使用了大量数据 通过采访百度的相关人士,我们发现百度预测世界杯的主要数据来源包括:百度搜索数据,球队基础数据,球员基础数据,赔率市场数据.百度大数据通过分析过去5年987支球队的3

大数据新应用&quot;靠谱商&quot;:破开店选址难题

文章讲的是大数据新应用"靠谱商":破开店选址难题,北京这么大,如果想在北京开一家咖啡馆,开在哪里好?相信是不少想做生意人的共同烦恼,选址是餐饮事业的开端,也是重中之重.不同地段.租金.客流.周边人群的消费诉求与消费能力都不尽相同,仅靠碰运气开店显然失败的概率要高于成功的可能.那么有没有什么产品能解决此类问题?答案是肯定的. ▲微瑞思创地产事业部总经理苍锐进行产品演示 9月26日下午,北京微瑞思创(以下简称:微瑞思创)在北京东隅酒店召开发布会,发布了最新的商业地产大数据产品"靠