云计算VS大数据 应用各不相同

现在,云计算和大数据无疑都是很火的概念,业内对他们的探讨也愈演愈烈,那么云计算与大数据的不期而遇又产生了怎样的联系呢?有人说云计算和大数据是双胞胎,两个是不同的个体,互相依赖又相辅相成,也有人说大数据是来搅局的。

云计算 VS 大数据

对此,IBM全球高级副总裁、系统与科技部(STG)总经理Rod Adkins认为,当前全球IT领域有了令人振奋的发展趋势和挑战,现在每天有大量数据和信息生成,这为大数据分析提供了机会;数据中心的挑战也为IT提供了新机会,比如云计算,能降低数据中心成本;IBM希望通过智慧的运算,实现智慧的地球的愿景。

英特尔亚太研发有限公司总经理、软件与服务事业部中国区总经理何京翔认为,大数据本身其实是信息革命的一个新引领。在未来几年随着物联网的发展,可能会有2100亿个RFID或者集群,在我们的环境之中,如果未来的移动互联、物联网如果变成现实,我们的生活会被传感器、会被数据采集装置所拥抱,这时候数据量将更大。这些数据量仅仅是数据,并不能解决问题,它要从数据变成信息、变成智能、变成商业价值,这才能够体现出真正的大数据的价值。

VMware全球高级副总裁范承工认为,在过去三年当中,看到大数据的发展从无到有,市场上大家说大数据的趋势,三年前可能还没有人说这个词,现在已经如火如荼。然而,现在除了数据本身发生了改变,云计算也使数据变得更加分散,在这样的趋势下,传统数据库对于海量数据的需求、快的需求、开发者数据多样化的需求难以满足,使各种各样的解决方案大行其道。

EMC的大数据和存储专家、EMC资深产品经理李君鹏认为,大数据本身就是一个问题集,云技术是目前解决大数据问题集最重要有效的手段。云计算提供了基础架构平台,大数据应用在这个平台上运行。目前公认处理大数据集最有效手段的分布式处理,也是云计算思想的一种具体体现。

对于大数据给云计算带来的影响,Teradata技术总监Stephen Brobst表示,公有云架构对数据仓库没有影响,因为企业的CIO不会无缘无故把财务数据或者客户数据放到云上,那样很危险。然而,是私有云架构确实有影响:第一,通过私有云,可以巩固数据集市,减少利用率不足的问题;第二,可以通过灵敏的方式将数据集成,实现业务价值。

大数据和云计算应用各不同

其实云计算与大数据的不同之处在于应用的不同,主要在两个方面:

第一,在概念上两者有所不同,云计算改变了IT,而大数据则改变了业务。然而大数据必须有云作为基础架构,才能得以顺畅运营。

第二,大数据和云计算的目标受众不同,云计算是卖给CIO的技术和产品,是一个进阶的IT解决方案。而大数据是卖给CEO、卖给业务层的产品,大数据的决策者是业务层。由于他们能直接感受到来自市场竞争的压力,必须在业务上以更有竞争力的方式战胜对手。

大数据不仅仅是Hadoop

Hadoop是Apache基金会发起和研发的,是目前业界公认的开放平台之一。授权公司可以发布自己相应的Hadoop版本。以Hadoop为代表的分布式系统,是大数据系统必要组成部分。必要性体现在现在的大数据中很多数据是机器产生的数据,或者是物联网各种各样的探测器、电脑产生的日志,这些是人为产生的,而且数量巨大,不适合把它直接放到数据库中去,而Hadoop就提供了全新的方式,可以轻松进行平面扩展,把这些数据放在库里进行任意的数据分析。Hadoop成功的建立了这个环境,使得围绕Hadoop的软件能够提供各种各样的功能,完成智能分析工作。

然而,大数据不仅仅是Hadoop,在对数据进行分析时,用户可以把数据放池子里,Hadoop则把这些数据分成几百个、几千个节点,这是在特定的某些应用场景必须进行的部分。但是更多的应用场景是需要实时的反应,互动的反应,这时候就需要其他技术,包括内存类检索技术,甚至在数据产生时要进行实时反应的技术。这些技术都结合在一起,才是一个完整的大数据处理系统。

各大厂商应对大数据

不论大数据时代是否真的来临,作为企业级服务厂商都应该走在受众的前面,应对大数据。

1.IBM:4V理论+大数据分析平台

IBM基于大数据提出了规模性(Volume)、多样性(Variety)、高速性(Velocity)和真实性(Veracity)的“4V理论”,帮助企业直观认知和准确把握大数据特质。

IBM早在2007年11月就推出了蓝云计算平台,“蓝云”基于IBMAlmaden研究中心(AlmadenResearchCenter)的云基础架构,包括Xen和PowerVM虚拟化、Linux操作系统映像以及Hadoop文件系统与并行构建。

此外,IBM还有大数据分析平台——InfoSphere。InfoSphere是IBM进军大数据领域的强有力武器,其包括 BigInsights和Streams,二者互补,Biglnsights基于Hadoop,对大规模的静态数据进行分析,它提供多节点的分布式计算,可以随时增加节点,提升数据处理能力;而Streams采用内存计算方式分析实时数据。InfoSphere大数据分析平台还集成了数据仓库、数据库、数据集成、业务流程管理等组件。

2.英特尔:硬件+软件 火力很猛

硬件上,英特尔从CPU、存储、内存一切的技术考虑怎么样使得新一代的系统架构,以及数据中心的解决方案能够更适合大数据的要求。

软件上,英特尔提供优化的中间件。以Hadoop为例,英特尔在Hadoop系统,在Hbase、HDFS上都做了增强和优化,使它们在英特尔的平台上,在英特尔的硬件上性能得到显著的提高,并推出了Intel Hadoop Manager2.0。

据介绍,Intel Hadoop Manager2.0 优化了Hadoop的处理能力,把拟数据采集到数据处理缩短到近于实时处理,且在英特尔平台上性能会成倍增长。

3.VMware:虚拟化架构+云平台

VMware公司大中华区总裁宋家瑜认为,云的平台才是唯一能解决爆炸性大数据使用的需求,把关键应用移到云平台已经是一个必然趋势。因此,VMware把尝试着把大数据应用到虚拟环境的云端。

VMware推出的开源项目Serenget,支持企业在云端和虚拟环境中,在vSphere上部署和管理Hadoop。据介绍,在这样的环境下,Hadoop部署时间可以从很多天缩短到10分钟。

此外,VMware在统一的vSphere虚拟化架构之上,提供GemFire实时处理、GreenPlum交互处理及Hadoop批处理三种模式,满足用户的海量、快速及灵活的大数据处理需求,并为开发者、数据分析师、数据科学家和商务用户提供数据分析及可视化的数据展示。VMware还公布了一个大数据分析平台 UAP(Universal Analytics Platform),其中包括Greenplum database、Hadoop和Chorus分析软件,帮助客户同时分析处理结构化和非结构化的数据。

4.EMC:EMC HADOOP

EMC发布了EMC HADOOP版本,它主要进行实时、非结构化的数据处理。EMC的产品系列在HADOOP包括三个方面:Greenplum HD社区版;Greenplum企业版;Greenplum HD Data Computing Appliance。

据介绍,在Greenplum HD中有一些核心的技术创新:可插拔I/O,可以用Isilon OneFS夺存储系统,也可以用Atmos等,提高效率和性能;实时处理可以实时数据交互和分析处理;在容错方面,消除名称节点的单点鼓掌,作业跟踪其及其他关键组件方面有很多优化。它最大的亮点是Greenplum Database与Apache HADOOP强强联合,这样的一个一体机实现了结构化、非结构化数据之间无缝的集成。

此外,甲骨文也推出了大数据机,为企业提供一种处理海量非结构化数据的方法,集成了硬件、存储和软件,包括Apache Hadoop软件的开源代码分发、新的甲骨文NoSQL数据库和用于统计分析的R语言开源代码分发。

时间: 2024-09-20 09:46:00

云计算VS大数据 应用各不相同的相关文章

快速理解云计算与大数据之间的关系

如今一家优秀的互联网公司肯定的是拥有数据运营的公司,反之,不能从数据中获取利益的互联网公司的就不是云计算应用者.互联网.云计算以及大数据,如今成了三个密不可分的词汇.更进一步,挖掘数据价值很多企业都会做,但如果不能用最低成本得到数据价值,企业同样活不下去.把数据以低廉成本变成财富的东西就是云计算.从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分.大数据必然无法用单台的计算机进行处理,必须采用分布式计算架构. 那么,云计算是如何帮助大数据将一堆堆杂乱信息转化成经济效益的呢? 首先,

[阿里研究院]“互联网+”的动力:云计算、大数据与新分工网络

"互联网+"的深刻内涵 普适计算之父马克·韦泽说:最高深的技术是那些令人无法察觉的技术,这些技术不停地把它们自己编织进日常生活,直到你无从发现为止.而互联网正是这样的技术,它正潜移默化地渗透到我们的生活中来.所谓"互联网+"就是指,以互联网为主的一整套信息技术(包括移动互联网.云计算.大数据技术等)在经济.社会生活各部门的扩散.应用过程.互联网作为一种通用目的技术(General Purpose Technology),和100年前的电力技术,200年前的蒸汽机技术

云计算,大数据,人工智能能否拯救没落的IBM?

过去,IBM主要销售服务器.然而,该公司的未来却在于他们在云计算,大数据,安全以及人工智能方面取得的进步. 但是,未来并不会像想象中来得那么快. 本周二,蓝色巨人公布了2015年第四季度的财报,营收和利润再次双双下降,这也是公司连续第15个月业绩下滑.尽管公司每股收益要比分析师预测的要高几分,但利润却从241亿美元跌到了221亿美元.此外,公司全年的业绩下滑了近12%. 新CEO Ginni Rometty执掌大权之后,开始关注企业成长.虽然她声称"公司在更高价值转型方面已经取得巨大进展&quo

从网格计算、云计算到大数据---这是场进化论

他是IBM IT技术创新者最高荣誉IBM Fellow的获得者;他领导过IBM"网格计算"战略;他是EMC公司院士及杰出工程师评估委员会的创始人和主席;他在EMC设定技术方向上扮演着重要角色.多年来, 他一直走在IT技术变革的最前沿,他就是EMC高级副总裁及CTO Jeff•Nick.近日,Jeff•Nick先生接受了Watchstor独家专访,畅谈了对云计算.大数据等热门技术的看法. 从网格计算.云计算到大数据---这是场进化论 回顾过去十余年的IT发展历程,网格计算.云计算和大数据

云计算与大数据带动融合成为未来IT发展大方向

在云计算.大数据等新兴技术的带领下,融合已然成为了未来IT行业的一大发展方向.面对着越来越复杂的企业IT环境,对IT基础架构的选择以及部署已经成为了日益复杂的难题.在本届惠普世界之旅的首站中国站,惠普宣布在亚太区扩展大数据咨询服务,帮助客户规划.实施和维护能够支持其大数据计划的IT基础设施,从而在降低成本的同时提高IT效率. 惠普预计到2016年,企业IT架构将呈混合形态.亚太区77%的企业IT架构将横跨私有.托管和公有云.不仅如此,调研显示,近半数的受访者认为开放式标准在云计算的崛起中起到至关

中国工程院院士高文:运用好云计算、大数据会为城市发展带来变革

 5月19日,由中国电子学会主办,ZD至顶网协办的第八届中国云计算大会进入第二日程,国家自然基金委副主任.中国工程院院士.中国大数据专家委员会副主任委员高文在全体大会上带来了"大数据分析与智慧城市建设"的主题分享. 高文表示,"现在云计算.大数据也好,把数据挖掘出来,实际上会对我们整个的社会也好.城市也好带来很多好处.所以把大数据用好了,实际上对整个城市的生活,会带来很多变化." 以下是高文演讲实录:(以下内容根据现场速记整理,未经发言嘉宾确认,仅供参考,谢绝转载.

云计算和大数据将成为工程设计第三次革命的主要推动力

日前,Bentley公司召开2013用户年会,会上,Bentley公司表示,即将发布Bentley Connect产品,通过云计算技术,为工程设计的信息管理带来新的理念和手段. 随着"四化同步"战略的推进和智慧城市建设步伐加快,工程设计信息化方兴未艾,特别是云计算给工程设计带来新的机遇. "云计算.大数据等新兴信息技术为工程设计和管理提供新的信息化方法." -Bentley公司首席运营官Malcolm Walte "信息管理(IM)为工程设计带来第三次革命

我国云计算和大数据均进入快速发展阶段

在本届通信展期间举办的"2017中国云计算与大数据产业发展大会"上,工业和信息化部信息通信发展司处长黄业晶表示,云计算.大数据作为近年来信息通信领域发展最迅速的产业之一,对国民经济和社会发展的支撑推动作用正在日益显现.在政策和市场的双重驱动下,我国的云计算和大数据产业双双进入快速发展的阶段. 他表示,2015年国务院出台了<关于促进云计算创新发展 培育信息产业新业态的意见>和<促进大数据发展行动纲要>等重要的文件,对于我国云计算和大数据产业发展提出了相关的指导原

我国云计算和大数据产业均进入快速发展阶段

在本届通信展期间举办的"2017中国云计算与大数据产业发展大会"上,工业和信息化部信息通信发展司处长黄业晶表示,云计算.大数据作为近年来信息通信领域发展最迅速的产业之一,对国民经济和社会发展的支撑推动作用正在日益显现.在政策和市场的双重驱动下,我国的云计算和大数据产业双双进入快速发展的阶段. 他表示,2015年国务院出台了<关于促进云计算创新发展 培育信息产业新业态的意见>和<促进大数据发展行动纲要>等重要的文件,对于我国云计算和大数据产业发展提出了相关的指导原

王坚:云计算和大数据,你们都理解错了

王坚,阿里巴巴最富争议性的人物之一,爱者极爱,恨者极恨. 5月12日,我和MTC的朋友,在杭州发起并主持了一场关于云计算的沙龙,虾米的思践聊了云音乐,快的打车陈伟星聊了云时代的产品设计,短趣网王强宇聊了云时代的创业,当然少不了王坚聊一聊他对云计算的看法. 当天,青龙老贼发了一段王坚的部分观点,遭遇了他开通微信公众号以来最强烈的退粉,也激起了圈内人的各种讨论,这就是王坚的"影响力". 我把王坚的分享做了个第一人称详细版的梳理,里面涉及了阿里云的定位.对大数据的反思.对APP创新的不看好,