云计算遭遇大数据:数据之道 智取未来

据分析,到2020年,全球以电子形式存储的数据量将达到35ZB,是2009年全球存储量的40倍。而在2010年底,根据IDC的统计,全球数据量已经达到了120万PB,或1.2ZB。如果将这些数据都刻录在DVD上,那么光把这些DVD盘片堆叠起来就可以从地球垒到月球一个来回(单程约24万英里)。

  在信息化的建设过程中,众所周知,数据可以分为3种:结构化数据、半结构化数据和非结构化数据。其中,85%的数据属于企业业务过程中产生的文档等非结构化数据。

  面对着海量的数据,人们不禁感叹,大数据时代已经到来,悲观者深为管理和维护而忧虑,乐观者则看到了大数据的大价值。何谓“大数据”,目前没有统一的定义。通常认为,它是海量的非结构化数据,其特点是数据量很大,数据的形式多样化。如何存储这些快速增长的、海量的数据?如何对大数据进行分析处理,挖掘出价值? 相关的一系列问题成为了所有企业面临的共同挑战。

  一、 大数据时代的挑战与目标

  大数据时代的挑战包括:如何实现高效、智能的大数据存储?非结构化数据正在呈海量增长趋势,如何对其进行有效的数据管理和应用?现有数据保护与文档归档机制能否应对日益增长的海量数据?如何攻克移动数据管理的难点问题?如何在复杂的数据环境下实现高效的数据安全? 如此种种问题,逐渐成为了所有CIO的共同挑战。

  但是我们发现,对于这些大数据的挑战,其实归纳起来就只有两个目标:

  1. 管理好大数据,从大数据的产生、存储、保护、归档到安全维护的各个角度,从根本上而言,这是IT管理维护的范畴,只不过数据量超出常规管理尺度后,对于管理维护的难度出现了跳跃式上升的态势;

  2. 使用好大数据,这是企业管理的最终目标,大数据即意味着大价值,数据与数据、数据与人、数据与业务的关联性。这个挑战既有流动性、关联性、智能的应用挑战,也有基于大数据深度挖掘的挑战。

  但是,这两个目标之间也不是分离的,而是一个相辅相成的关系,管理和维护的目的是使用,使用的基础是好的管理维护。

  二、 云计算与大数据,时代的交集

  为了解决大数据的挑战,人们自然而然的想起了云计算,云计算遭遇大数据,这是时代的发展必然趋势。云计算技术可以实现IT资源的自动化管理和配置,降低IT管理的复杂性,提高资源利用效率。对企业来说,云计算的主要形态是私有云,其主要的业务由私有云支撑,而非关键的业务或者突发性的业务可以采用公共云资源。私有云与公共云需要无缝连接,从而形成混合云的环境。

  大数据意味着大资源,这是云计算与大数据的交集,其实也就是意味着,云计算与大数据的关系是两个方向,云计算可以承载大数据,大数据也是可以通过云计算架构和模型来提供解决方案。这样我们就可以清晰的知道,大数据在管理和应用的方向上,可以通过云计算的资源共享、高可扩展性、服务特性来搭建和运营。

  三、 大数据的大内涵

  如果说大数据与云计算的交集是外部交集,那么大数据内部的关联、挖掘,则是大数据的大内涵,这个调整远远超过云计算的应用难度,数据与数据的复杂关系,比如跨应用系统的结构化数据与非结构化数据的关联;海量数据的存储以及数据在人之间的分享;数据(结构化与非结构化)与业务和决策间的关联。

  要解决这个问题的一个思路是EMC提出的信息生命周期思想,但是在很多业界同行看来,这个思想在云计算和大数据时代需要真正的升华,而这个方向就是智能,不是单一和局部的,而是统一的智能。IBM提出了智慧的地球,作为国内崛起的新兴代表爱数则提出了智能数据管理解决方案,也是基于统一智能和信息生命周期思想的框架。

  无疑,这是一种新的思路,据爱数相关负责人透露,这种统一的框架采用云计算体系结构,主要技术突破在资源池化和法规管理遵从,从数据生成阶段就将大数据纳入到生命周期管理中,通过统一的智能策略,既提供了很好的运维和保护,也能在使用和挖掘阶段与业务应用结合起来,提供统一的数据信息平台。

  四、 数据之道,智取未来

  对于大数据时代,无论是企业还是厂商,策略、规划和思想是核心,与云计算一样,大数据的大内涵,需要有大思维和高规划。计算时代成就了Wintel为代表的一批厂商,那个时代的旋律是摩尔定律;网络互通时代正在成就包括GOOGLE、FACEBOOK、腾讯为代表的网络新贵,这个时代的主旋律是互通;大数据时代的到来,为更多的厂商带来了机会,而这个时代的主基调,无可厚非,智能必将当道。正所谓,数据之道,智取未来。

(责任编辑:蒙遗善)

时间: 2024-07-30 22:28:38

云计算遭遇大数据:数据之道 智取未来的相关文章

云计算遭遇大数据 碰撞出技术革命

前两天有人在微博发问,用什么样的方式讲述大数据和云计算才能非专业人士听的更清楚,其实关于大数据的案例有很多,商业智能分析也多次提到过关于数据挖掘的价值和意义,只不过在今天看数据比以前还多而已,大数据并不可怕,可怕的是他的实时分析能力,会让缺点和真相赤裸裸暴露在人们面前,那么当云计算遭遇大数据一股脑向企业涌进的时候,企业能否驾驭呢? 所谓的大数据主要涵盖3V面向,分别是处理时效(Velocity).数据格式(Variety)与数据量(Volume):所以大数据并非单一技术,而是众多技术项目的集合体

档案管理遭遇云计算和大数据

档案管理遭遇云计算和大数据 梁启敏 刘晖 刘怡君 应用云计算和大数据的思想方法,对档案管理带来的历史性变革进行分析,档案云的建设与大数据的结合,催生的爆炸性数据.阐述在伴随云计算和大数据的思想大潮中,给档案管理带来的影响以及挑战,档案管理在大背景下会发生的蜕变. 档案管理遭遇云计算和大数据

用"数据"说话 从SACC看大数据应用之道

文章讲的是用"数据"说话 从SACC看大数据应用之道,正如<大数据的冲击>的书中提到的那句话:"Google.Amazon.Facebook.Twitter,这些称霸全球互联网的企业,它们的成功都具备一个共同的因素,你知道是什么吗?"当然不是商业模式,因为他们的商业模式不尽相同.当然也不是客户服务,尽管这个很重要,那这其中最重要的共同点恐怕就是大数据技术的应用. 曾经有人说互联网将改变很多的行业,但在热衷大数据技术的人眼里,真正改变那些行业的并不是互联网

大数据,小数据,哪道才是你的菜?

美国著名科技历史学家梅尔文•克兰兹伯格Melvin Kranzberg曾提出过大名鼎鼎的科技六定律其中第三条定律是这样的[1]"技术是总是配"套"而来的但这个"套"有大有小Technology comes in packages, big and small". 这个定律用在当下是非常应景的.因为我们正步入一个"大数据big data"时代但对于以往的"小数据small data"我们能做到"事了

李德毅院士:再大的数据也能绕过那道弯

中国电子学会云计算专家委员会名誉主任委员.中国大数据专家委员会顾问.中国工程院院士李德毅 在5月21日的第六届中国云计算大会上,李院士的演讲信息量极大,纵观科技发展几十年的历史,细数其中代表人物(居然其中还提到了歌星那英,WHY?).演讲到底有多精彩?看看李院士演讲后,火爆的新书签售现场就知道了,排队购书等着李院士签名的人足有50多米,组委会动用数名保安维持秩序,更令人惊奇的是签售的书是<不确定性人工智能>,这么高大上的书可不是每个人都能看懂的啊! 闲言少叙,请看演讲实录: 文字:基于CSDN

中国工程院院士高文:运用好云计算、大数据会为城市发展带来变革

 5月19日,由中国电子学会主办,ZD至顶网协办的第八届中国云计算大会进入第二日程,国家自然基金委副主任.中国工程院院士.中国大数据专家委员会副主任委员高文在全体大会上带来了"大数据分析与智慧城市建设"的主题分享. 高文表示,"现在云计算.大数据也好,把数据挖掘出来,实际上会对我们整个的社会也好.城市也好带来很多好处.所以把大数据用好了,实际上对整个城市的生活,会带来很多变化." 以下是高文演讲实录:(以下内容根据现场速记整理,未经发言嘉宾确认,仅供参考,谢绝转载.

王坚:云计算和大数据,你们都理解错了

王坚,阿里巴巴最富争议性的人物之一,爱者极爱,恨者极恨. 5月12日,我和MTC的朋友,在杭州发起并主持了一场关于云计算的沙龙,虾米的思践聊了云音乐,快的打车陈伟星聊了云时代的产品设计,短趣网王强宇聊了云时代的创业,当然少不了王坚聊一聊他对云计算的看法. 当天,青龙老贼发了一段王坚的部分观点,遭遇了他开通微信公众号以来最强烈的退粉,也激起了圈内人的各种讨论,这就是王坚的"影响力". 我把王坚的分享做了个第一人称详细版的梳理,里面涉及了阿里云的定位.对大数据的反思.对APP创新的不看好,

云计算、大数据能为反恐做什么?

文章讲的是云计算.大数据能为反恐做什么,11月25日召开的国家反恐怖工作领导小组专题会议上,公安部部长郭声琨提出,要运用大数据.云计算技术打击恐怖行为."从海量的人流.物流.信息流.资金流中及时发现涉恐线索,做到预警在先.预防在前.敌动我知.先发制敌." 大数据如何反恐呢?全球各国的成功经验值得借鉴.8月底,美国国防部长卡特(Ash Carter)赴硅谷招募顶尖科技人才.近年来的信息大爆炸使得五角大楼不得不将目光聚焦高科技硅谷,以打击反恐.美国中央情报局的CTO Gus Hunt则表示

企业互联网时代下的大数据构建之道

文章讲的是企业互联网时代下的大数据构建之道,"现在企业互联网化正在迅速渗透到企业以及所处的产业链和生态圈中,借助互联网,企业可以更容易与前端供应商.服务商包括后端客户.最终客户建立密切的联系.在此过程中新的业务模式包括供应链优化.智能制造.产业链协同.电子商务等正在不断兴起并迅速发展." 用友网络科技股份有限公司助理总裁,兼集团iUAP中心副总经理谢东在接受记者采访时说道. 企业互联网化 大数据成为核心资产 企业互联网化已经成为一种趋势,它正在改变着企业的传统的业务模式,使得企业内部运