大数据爆发前夜需度过两大瓶颈

今年早些时候《纽约时报》刊文称“大数据时代已来临”文章中说,大数据是一个带有文化基因和营销理念的词汇,但同时也反映了科技领域中正在发展中的趋势,这种趋势为理解这个世界和作出决策的新方法开启了一扇大门。根据科技研究公司IDC作出的估测,数据一直都在以每年50%的速度增长,换而言之,也就是每两年就增长一倍。这不是简单的数据增多的问题,而是全新的问题。

随着互联网技术日新月异,人类的线下行为逐渐迁移线上。过去人的沟通、社交、办公以及日常生活场景等其他物理行为在日益发展的强大技术背景下都将被全部数字化,现实场景数字化到线上,对个人意味着足不出户就能得到个性化、智慧化的服务,对企业意味着不在费尽周折了解一个客户过去交易记录,只需查看此客户过去的一些交易行为数据,立刻判断该客户值不值得合作。

这些个人日常行为以及企业交易行为通过日积月累而产生的大量数据,无论从容量、种类还是速度与过去已不可同日而语,甲骨文大中华区技术总经理喻思成表示:大数据时代的数据源不仅有传统的结构化数据,还有非结构化数据。大数据处理方式的要求也完全不一样了。我们并不是要完全颠覆数据管理和处理体系,而是要在原有基础上增加新的处理方式,形成更完善更完整的体系

大量数据产生的背后彰显出的是一个新产业变革的前夜,通过对大量数据的挖掘、整理、分析、利用并实现数据价值,是目前业界较关注的话题。

在记者采访多名企业CIO后,大多数企业CIO认为,国内能利用大数据背后产业价值的行业主要集中在金融、电信、能源、证券、物流行业,其他行业谈大数据价值为时尚早。虽然有反对的声音,但不得不承认在技术快速变革当今浪潮下,大量数据的产生已成必然趋势。

在科学和体育、广告和公共卫生等其他许多领域中,也有着类似的情况——就是朝着数据驱动型的发现和决策的方向发生转变。哈佛大学量化社会科学学院(Institute for Quantitative Social Science)院长加里-金称:“这是一种革命,我们确实正在进行这场革命,庞大的新数据来源所带来的量化转变将在学术界、企业界和政界中迅速蔓延开来。没有哪个领域不会受到影响。”

市场分析公司Ventana Research的研究表明,最常见的企业大数据类型是客户数据和交易数据。被最常分析的非机构化数据源主要是应用系统日志和事件数据,比如RFID标签信息、网络流量和监控数据。但增长最快的非结构化数据还是各类社交媒体上的文本信息。

但如何利用这些数据背后所承载的价值是目前业界思考的热切话题以及接下来需要面对的大数据挑战。

首先大数据的出现催生出产业人才缺口瓶颈,在大数据项目的实施方面,被调查公司普遍缺乏相关的技术能力。75%以上的公司表示在人员和培训方面存在障碍,会开源大数据技术Hadoop的人才很热门,但是比较难找而且昂贵。其它技术方面的挑战还包括实时数据的处理、大数据与传统的BI和数据仓库工具的整合、数据的安全性等。

SAS软件总经理刘政认为:大数据严重人才短缺,欧美公司也在中国寻找人才,但他们不知道中国本身大数据人才更匮乏。将来一个国家的竞争力很大程度上决定于分析人员,要通过数据分析结果做决策。所以分析人员的水平对于国家和企业的竞争力来说都是非常重要的

其次是商业模式问题,一个产业获得良性发展,需要好的商业模式加以驱动才能持续发展,

有业内专家表示不同行业数据需用不同的商业模式加以驱动,落地之前还需要细化与深化,特别是具体的行业应用,也有人认为,想清楚商业模式,价值才有根基,有了商业模式,大数据模型、算法也有了方向。就如啤酒与尿布,发现这个规律,数据价值方向也就彰显端倪。

(责任编辑:蒙遗善)

时间: 2024-07-29 16:49:26

大数据爆发前夜需度过两大瓶颈的相关文章

大数据落地引发BI变革 两大挑战揭秘

支点网 随着信息化技术的发展与应用,为各行业的企业在业务发展上带来了最直接的机会.同时也产生了大量的业务相关数据,这些数据可能会涉及到企业的财务信息.营销数据.客户资料等等. 这些数据的留存是否会对业务发展提供有力的帮助呢?据相关机构估算,在财富500强的企业中,平均每一家企业都会保存有最近7至10年的客户数据,而这些数据往往未得到充分的利用.与此同时,这类的数据还在大幅度的增长.据经济学家最近的一项研究显示,人类在2005年中创造了大约150 EB字节的数据信息,而2011年达到了1800 E

应对大数据挑战 企业需共享式服务模型

本文讲的是应对大数据挑战 企业需共享式服务模型,大数据来袭!当企业准备把自己的MapReduce应用从实验环境迁移到生产环境时,共享式服务模型将为这种迁移提供许多重要功能,并加快迁移步伐. 大数据是当今科技行业发展速度最快的领域之一.大数据具有前所未有的大量化.快速化和多样化三大特点,这些是许多新技术背后的驱动力,这些技术可帮助企业处理大数据带来的多种新问题. 在诸多的新兴解决方案中,Hadoop和MapReduce被视为是两种大有希望的方法,可高效管理和分析大数据.但目前针对MapReduce

马云已在大数据应用上确定了两个方针

阿里的未来将由"云计算+大数据"组成.阿里正在建设一个大数据环境,让数据变成工程,围绕数据提供一整套的精细化服务.马云在整个数据应用上确定了哪两个方针?它的大数据的打法和战术以及面临的问题是什么?有哪些值得你去借鉴和思考的?仔细看看这篇记者"潜入"阿里写出的阿里最近的秘密-- 在阿里IT深入采访第一天中,阿里人提到最多的两件事:一是长腿欧巴李敏镐,二是马云最近一封内部邮件.3月8日,李敏镐空降杭州银泰将手机淘宝三八节的火热推向顶点:而马云的内部信件则明确了阿里的未来

李彦宏两会答记者问:大数据在使用上面临两个问题

北京3月6日下午,全国政协十二届二次会议在人民大会堂新闻发布厅举行记者会,邀请周伯华.厉以宁.陈锡文.杨凯生.李彦宏等就"深化改革推动经济持续健康发展"的相关问题回答记者提问.   中国互联网新闻中心.中国网记者提问全国政协委员.全国工商联副主席.百度公司董事长兼首席执行官.中国互联网协会副理事长李彦宏:前天你在小组发言上说,中国的大数据利用率还比较低,请问怎么提高?难点在哪里?大数据必然要上互联网,要借助IT平台,从这个角度来看,我们怎么样既保障互联网的安全,进行互联网各种信息监管,

探秘阿里:马云已在大数据应用上确定了两个方针

(导读)阿里的未来将由"云计算+大数据"组成.阿里正在建设一个大数据环境,让数据变成工程,围绕数据提供一整套的精细化服务.马云在整个数据应用上确定了哪两个方针?它的大数据的打法和战术以及面临的问题是什么?有哪些值得你去借鉴和思考的?仔细看看这篇记者"潜入"阿里写出的阿里最近的秘密-- 在阿里IT深入采访第一天中,阿里人提到最多的两件事:一是长腿欧巴李敏镐,二是马云最近一封内部邮件.3月8日,李敏镐空降杭州银泰将手机淘宝三八节的火热推向顶点:而马云的内部信件则明确了阿

创业者的机会来了大数据即将颠覆改造的十大行业

大数据的产业链从整体上可以分为四大层,包括IT基础层.数据基础层.数据应用层和数据安全层.个人认为在 中国市场对于创业者来说,数据应用层的创业机会最多,想象空间也最大.本文将重点介绍数据应用层在中国市场的发展机会和相应的创业机会,但在数据应用层的创业,最大的挑战是多数创业者一开始只有大数据应用能力而缺乏数据,需要边做应用服务边收集数据,一旦数据和应用能力两者都具备了,大数据的创业将进入了估值比较高的阶段.下面我们将从大数据分析与数据挖掘.大数据可视化.大数据产品解决方案以及大数据行业应用四个方向

大数据如何解决行业挑战?大数据在10个垂直行业中的应用

大数据已经成为过去几年中大部分行业的游戏规则,行业领袖,学者和其他知名的利益相关者都同意这一点, 随着大数据继续渗透到我们的日常生活中,围绕大数据的炒作正在转向实际使用中的真正价值. 虽然了解大数据的价值仍然是一个挑战,但其他实践中的挑战包括资金投入和投资回报率以及相关技能仍然是大数据行业排名前列.Gartner调查显示,75%以上的公司正在投资或计划在未来两年投资大数据. 一般来说,大多数公司都希望有几个大数据项目,公司的主要目标是增强客户体验,但其他目标包括降低成本,更有针对性地进行营销,并

运营商发力大数据,实现流量经营向大数据运营的创新转型

未来是一个数据驱动的世界,一切都将被数字化,数字化创新转型将成为各行业应对时代变化和市场竞争的必由之路.Gartner 数据显示,全球数据量每两年翻一倍,每年新产生和复制的数据量将从2013年的4.4ZB增长到2020年的44ZB.IDC报告预测,到2017年,数字化业务上的能力欠缺将使25%的企业失去市场位置,20%的行业领先企业将被2000年以后成立的企业取代. 电信运营商具有发展大数据的先天性优势,电信与媒体市场调研公司Informa Telecoms & Media 在2013年的调查结

大数据,重新定义下一场变革—中关村大数据日开幕

大数据正在成为一股热潮,它已经不仅是IT领域的技术变革,正在不断冲击着政治.商业.社会.科技诸多领域.面对大数据,有关于应用的探索,关于模式的思考,关于安全的质疑,但是无论如何,大数据,已经成为新一轮技术变革的最强音,国计民生商业创新无不相关,无论如何,我们都必须直面大数据时代的到来. 云基地作为国内最早在根植云计算技术及商业模式的领先者,也一直积极关注大数据带来的发展机遇.紧承12月12日的云世界大会,一场大数据盛宴将于12月13日在中关村软件园拉开帷幕.云基地携手北京中关村管委会举办的此次中