“大数据”时代来袭 CIO你还能hold住吗?

据市场研究公司IDC统计,未来10年里预计数字信息总量将在2009年到2020年期间增长44倍,全球数据使用量将达到大约35.2ZB(1ZB = 10亿TB)。与此同时,单个数据集的文件尺寸也将增加,导致对更大处理能力的需求以便分析和理解这些数据集。

一项由Unisphere Research对531名独立Oracle用户进行的调查发现,百分之九十的企业的数据量在迅速上涨,其中16%的企业每年的增长率达到50%或更高。不少企业已经感受到失控数据增长对绩效造成的冲击,其中发现87%的受访者将企业的应用程序性能问题归咎于不断增长的数据量。

  为什么人们对大数据如此感兴趣?大数据是一股突破性的经济和技术力量,它为IT支持引入了新的基础架构。大数据解决方案消除了传统的计算和存储的局限。借助于不断增长的私密和公开数据,一种划时代的新商业模式正在兴起,它有望为大数据客户带来新的实质性的收入增长点以及富于竞争力的优势。

  大数据之华山论剑

  尽管"Big Data"可以翻译成大数据或者海量数据,但大数据和海量数据是有区别的。Informatica中国区首席产品顾问但彬认为:"大数据"包含了"海量数据"的含义,而且在内容上超越了海量数据,简而言之,"大数据"是"海量数据"+复杂类型的数据。大数据包括交易和交互数据集在内的所有数据集,其规模或复杂程度超出了常用技术按照合理的成本和时限捕捉、管理及处理这些数据集的能力。大数据是由三项主要技术趋势汇聚组成:海量交易数据、海量交互数据、海量数据处理。

  EMC公司全球高级副总裁、大中华区总裁叶成辉在接受记者采访时表示:大数据目前没有统一的定义。通常认为,它是海量的非结构化数据,其特点是数据量很大,数据的形式多样化。

  NetApp 大中华区总经理陈文所理解的大数据包括A、B、C三个要素:大分析(Analytic),高带宽(Bandwidth)和大内容(Content)。

  IBM用三个"V"来作为大数据的判断依据,只要满足了其中的两个即为大数据:多样性(variety)、体量(volume)和速度(velocity)。其中,多样性是指,数据应包含结构化的和非结构化的数据。体量是指聚合在一起供分析的数据量必须是非常庞大的。而速度则是指数据处理的速度必须很快。

  对于大企业而言,大数据的兴起部分是因为计算能力可用更低的成本获得,且各类系统如今已能够执行多任务处理。其次,内存的成本也在直线下降,企业可以在内存中处理比以往更多的数据。还有就是把计算机聚合成服务器集群越来越简单。IDC的数据库管理分析师Carl Olofson认为,这三大因素的结合便催生了大数据。

  Olofson说,大数据"并非总是说有数百个TB才算得上。根据实际使用情况,有时候数百个GB的数据也可称为大数据,这主要要看它的第三个维度,也就是速度或者时间维度。假如我能在1秒之内分析处理300GB的数据,而通常情况下却需要花费1个小时的话,那么这种巨大变化所带来的结果就会增加极大的价值。所谓大数据技术,就是至少实现这三个判据中的两个的可承受得起的一种应用。"

大数据意味着通过更快获取信息来使做事情的方式变得与众不同,并因此实现突破。大数据被定义为大量数据(通常是非结构化的),它要求我们重新思考如何存储、管理和恢复数据。那么,多大才算大呢?考虑这个问题的一种方式就是,它是如此之大,以至于我们今天所使用的任何工具都无法处理它,因此,如何消化数据并把它转化成有价值的洞见和信息,这其中的关键就是转变。

  总之,大数据已经引起了各家IT厂商的关注,大数据备受关注的原因有两个,一个数据结构复杂,数据挖掘过程困难;第二,数据量大,而且更新快,处理及时性要求特别高。

  

(责任编辑:蒙遗善)

时间: 2024-10-24 21:12:10

“大数据”时代来袭 CIO你还能hold住吗?的相关文章

互联网大数据时代来袭:蕴藏创业空间待挖掘

用户的消费习惯.兴趣爱好.关系网络以及整个互联网的趋势.潮流都将成为互联网从业者关注的热点,而这一切的获取和分析都离不开大数据.一方面,社会化媒体基础上的大数据挖掘和分析将会衍生很多应用:另一方面,基于数据分析的营销咨询服务也正在兴起. 这些专注于数据挖掘和数据服务的公司将成为电子商务乃至互联网第三方服务业中的新兴力量. 数据背后潜藏着巨大的商业机会.以前只有Google.微软这样的公司能做大数据的深挖,现在已经有越来越多的创业公司进入,不同公司在不同维度的数据分析和服务正创造出新的商业模式.

大数据时代,CIO如何稳步前行?

到目前为止,我们还很难说清到底什么由"C什么O"来打理大数据方面的事务.对于CIO们而言,如果他们想要承担起这份职责,首先需要把注意力从技术转移到http://www.aliyun.com/zixun/aggregation/13686.html">业务创新身上. 许多企业都面临着相同的难题:"到底应该由谁来统领企业中的数据与分析工作?"答案多种多样,CIO只不过候选人之一. 尽管CIO中的"I"代表"信息",

武新:大数据时代 行业数据库应用与发展

文章讲的是武新:大数据时代 行业数据库应用与发展,临近年尾,各大媒体评选的网络热词已经新鲜出炉,"DUANG"."城会玩"."内心几乎是崩溃的"等网络用语均榜上有名,而若论如今的技术热词,"大数据"与"云计算"二者毫无疑问将名列榜首.这两个词几乎已经成了互联网时代的"代言人",做个项目推个产品没有它们,你都不好意思自称是IT圈内人.近年,在影响力不断增大的同时,大数据与云计算早已不是互联

成为大数据时代巨头的5个要素

编者按:Navin Chaddha是早期阶段风险投资公司Mayfield的总经理.这家公司目前正在投资的一些公司包括Gigya.Elastica.Lyft.MapR和Poshmark. 随着2014年下半年的到来,大数据俨然已经成为了一种社会主流,它影响了我们的休闲读物.多个产业的格局和面向消费者的应用等各方各面,同时也左右了大批资本的流向.风险投资行业在过去45年的时间内已经见证过许多技术周期--从PC时代的诞生,到主从式架构计算和基于网络计算的发展,还有云端和SaaS模式的崛起,我们对一家公

CIO时代APP微讲座:南京邮电大学李涛深度解读大数据时代的数据挖掘

3月13日下午,南京邮电大学计算机学院.软件学院院长.教授李涛在CIO时代APP微讲座栏目作了题为<大数据时代的数据挖掘>的主题分享,深度诠释了大数据及大数据时代下的数据挖掘. 众所周知,大数据时代的大数据挖掘已成为各行各业的一大热点. 一.数据挖掘 在大数据时代,数据的产生和收集是基础,数据挖掘是关键,数据挖掘可以说是大数据最关键也是最基本的工作.通常而言,数据挖掘也称为Data Mining,或知识发现Knowledge Discovery from Data,泛指从大量数据中挖掘出隐含的

大数据时代CIO们必备的五大硬功

大数据时代CIO们必备的五大硬功 目前,大数据仍然不算普及,但并不代表大数据是没有意义的技术,其价值及分析结果已经令很多企业家垂青.企业都在开始尝试利用大数据来增强自己的企业业务竞争力,但是对于大数据分析行业来说,这技术仍然处于快速成长的初期,这领域仍有很多未定型的技术範畴,潜能可谓无法预视.现在企业最想知道的,应该是紧贴发展趋势吧.以下有五项技术趋势,CIO会更了解如何时署合适自身业务的大数据方案:     1.基于云的大数据分析     Hadoop是用于处理大型资料集的一个框架和一组工具,

大数据时代 光靠x86服务器还玩得转么?

文章讲的是大数据时代 光靠x86服务器还玩得转么,随着云计算和大数据进入落地阶段,新一代数据中心已经成为支撑企业创新发展战略的关键.但随之而来的一系列运维和管理难题,也成了当下IT人员必须应对的挑战.现行的企业级数据中心大多都以x86架构为主,尤其是互联网行业与创业团队,因为业务需求单一,寻求性价比,更是将x系服务器视为首选.然而,随着大数据.云计算等新技术的不断发展与成熟,业务的创新需求层出不穷,各色应用接踵而至,x系服务器架构不堪重负的同时,IT管理员更是苦不堪言.综合起来,可以从三个层面入

大数据时代下,CIO需要挖掘大数据背后的价值

云计算.大数据.移动化的技术浪潮中,创新管理与产品模式不断--云管理.云手机.云电视等陆续推出.在企业级市场,作为企业IT系统的核心基础设施,数据中心的建设.管理与运维也被推至举足轻重的地位. 云计算.大数据.移动化的技术浪潮中,创新管理与产品模式不断--云管理.云手机.云电视等陆续推出.在企业级市场,作为企业IT系统的核心基础设施,数据中心的建设.管理与运维也被推至举足轻重的地位. 大数据时代下,CIO需要挖掘大数据背后的价值,这就要求既要拥有海量数据,又要拥有海量数据的接入设备,以及实时的计

Etu蒋居裕:大数据时代还处于早期

市场研究公司IDC预计,2012年全世界的数据总量将会达到2.7ZB,而且今后每两年将会增长一倍.同时,企业高层管理人员也意识到了数据的力量,普华永道的调查显示,71%的CEO认为数据是企业公司里面最重要的一种资产,但仅43%的CEO认为其IT机构在数据交付价值上是很有效的.在数据爆炸的情况下,有评论称,我们已经进入了大数据时代. 知意图(Etu)负责人蒋居裕 对此,知意图(Etu)负责人蒋居裕在精准推荐系统Etu Recommender发布会上发表了他的看法. 蒋居裕坦言:"美国是全世界最早有