风起云涌:Hadoop应势崛起 催生云连接器

文章讲的是风起云涌:Hadoop应势崛起 催生云连接器,2011年,云计算带热大数据,2012年,大数据则将炒高Hadoop。

  2011年大数据技术已经站在了存储领域的风口浪尖上,各种分析研究所指的数据爆炸趋势,使得大数据不可避免地成了众多厂商的一个新宣传点以及战略目标,提醒人们要换个角度思考PB级存储。

  EMC、IBM、惠普、Oracle、NetApp在内的主流存储厂商都铺开了自己的大数据策略,就像当年云计算的风靡一样,大数据领域变得越来越拥挤,厂商纷纷在调整各自的定位与战略以抢占先机。

  那么,2012年大数据领域将会有什么新的变化和动向呢?我们看到,大数据厂商的成长,正在带动Hadoop的迅速升温。

  Hadoop是一种基于免费许可、支持数据密集型分布式应用的软件框架,建立在MapReduce技术上,使应用可以处理数千个节点和PB级数据,让数据处理和数据分析变得更加方便快捷,应用于企业中将改变很多企业的业务模式,它包括但并不局限于分布式计算Hadoop。

  Hadoop在可伸缩性、强健性、性能和成本上具有无可替代的优势,事实上已成为当前互联网企业主流的大数据分析平台。

  Hadoop似乎已经变得无处不在,EMC、戴尔、IBM、甚至微软都已经开始跻身Hadoop阵营。例如,EMC推出了针对常用于数据密集型分布式应用的Apache Hadoop开源软件以及高性能的Hadoop专用数据协同处理设备——Greenplum HD数据计算设备(Data Computing Appliance)。

  戴尔宣布与Cloudera新的合作伙伴关系从而加入了日益庞大的Apache Hadoop俱乐部。

  IBM则利用IBM InfoSphere BigInsights软件,在SmartCloud Enterprise上运行Hadoop。

  连微软也开始涉足Hadoop领域,宣布在Windows Azure和SQL Server中整合Hadoop-as-a-Service服务,在2012年提供给那些在其平台上处理大数据的公司。

  众多厂商拥抱Hadoop,说明客户和开发者需要有能够应对各种大数据的工具。

  事实上现在有很多调查报告都指出,有许多企业机构都在考虑或者正在使用Hadoop平台进行数据挖掘,执行大量以前不可能实现的数据分析,应对非结构化数据并更好地利用计算资源。

  而且,为了充分利用Hadoop和类似技术,软件开发商们也在开源社区里开发出各种各样的技术。虽然开源技术还没有得到商业支持。但根据IDC预计,年内至少有三家商业公司会给予Hadoop支持。同时, 不少厂商将发布配有Hadoop组件的分析工具,这种工具能帮助企业开发自己的应用程序。

  从长远来看,Hadoop也将发展到人们对此了解并不深入但几乎大家都听说过的阶段。一旦遇到涉及大量非结构化的数据采集和处理时,Hadoop就会有很大的用武之地,相信明年将是Hadoop大展拳脚的一年。

原文发布时间为:2011-12-26

本文作者:佚名

时间: 2024-12-23 06:41:56

风起云涌:Hadoop应势崛起 催生云连接器的相关文章

NFC顺物联网之势崛起,意法半导体实力几何?

高科技发展日新月异,不过近年来许多技术及产品的创新皆围绕着"物联网(IoT)"此一主轴,物联网相关应用的衍生充满无限大的想像空间,带动庞大的市场需求,促使业者相继地投入智慧城市.智慧居家.智慧生活.身分辨识.远端医疗等应用领域.物联网影响所及,我们的食衣住行等日常生活.工作环境及运作模式.休闲娱乐方式等皆将产生重大变革. 根据国际研究机构Gartner于2015年所发布的资讯,预估2020年连网装置将超过260亿个,后续衍生的商机更可望高达上兆美元.麦肯锡全球研究院(McKinsey

Burton Group:四大优势催生云账户

本文讲的是Burton Group:四大优势催生云账户,[IT168 专稿]基于云的账户服务(Cloud-Based Identity Services)正逐渐被企业用户所接受,然而它的设计与现有的整体账户架构(Corporate Identity Architect)截然不同.对此,著名IT咨询和预测公司Burton Group的副总裁兼研发主任Bob Blakely发表了自己的看法. Burton Group的副总裁兼研发主任Bob Blakely 在7月底San Diego举办的Burto

基于Hadoop架构的移动终端云资源访问模式研究与应用

基于Hadoop架构的移动终端云资源访问模式研究与应用 北京工业大学  汤艳 为了在Hadoop架构上建立移动终端云资源访问模式,首先对Hadoop架构的基本组成进行深入了解,并着重分析其核心组件HDFS分布式文件系统和MapReduce分布式编程模型的工作原理.由于Hadoop和云计算在观点和关键技术上的一致性,使得Hadoop成为面向分布式的云计算平台.其次,将云资源访问模式分为数据存储策略.请求调度算法和数据响应方式三个方面进行讨论,并对Hadoop架构下常见的云资源访问模式进行分析.然后

Hadoop崛起,带热云连接器

云计算带热大数据,大数据炒高Hadoop. 前几年的数据技术就已经站在了存储领域的尖端,各种分析研究所指的数据的爆炸趋势,使得大数据不可避免的成了众多厂商的一个新宣传点或者说是战略目标,提醒人们要换个角度去思考PB级的存储. EMC.IBM.惠普.Oracle.NetApp在内的主流存储厂商都铺开了自己的大数据计划,就像当年云计算的风风火火一样,大数据领域变得更加拥挤,厂商纷纷在调整各自的定位与战略以抢占先机. 那么,2012年大数据领域将会有什么新的变化和动向呢?我们看到,大数据厂商的成长,正

[大数据新手上路]“零基础”系列课程--如何将ECS上的Hadoop数据迁移到阿里云数加·MaxCompute

免费开通大数据服务:https://www.aliyun.com/product/odps  想用阿里云数加·大数据计算服务(MaxCompute),但是现在数据还在hadoop上,怎么办? 大数据计算服务(MaxCompute) 快速.完全托管的TB/PB级数据仓库解决方案,向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全. 了解更多   别烦恼,跟着我们走,来一次MaxCompute零基础数据迁移之旅-Let'

【Hadoop Summit Tokyo 2016】云上Hadoop——从专家的角度解释What、Why和How

本讲义出自SATO Naoki在Hadoop Summit Tokyo 2016上的演讲,主要从What.Why和How三个角度解释了在云上应该如何使用Hadoop,在Why方面,他分享了Hadoop运行在云上的好处:在What方面,主要分享了云上Hadoop的选项以及云上的Hadoop集群以及集群定制等内容:在How方面,主要分享了如何在云上部署Hadoop架构.

社交媒体崛起催生行业生态改观 数字媒体的裂变动机

数字媒体的蛋糕正越做越大. 普华永道(PricewaterhouseCoopers)发布的最新娱乐与媒体展望(Entertainment & Media Outlook)报告指出,去年,全球数字广告媒体支出增长了12.9%,至2015年将会每年平均增长11.5%.在未来五年里,数字媒体将会产生59%的娱乐及媒体增长. 在快步前行的同时,这一行业正产生裂变.社交媒体的崛起正催生行业生态改观.这一拥有更强用户渗透力.交互黏性和更大增长空间的业态,是否会取代其他数字媒体成为主流形态,未来各类数字媒体形

【Hadoop Summit Tokyo 2016】云上SQL-on-Hadoop的状态

本讲义出自Nicolas Poggi在Hadoop Summit Tokyo 2016上的演讲,在演讲中首先介绍了BSC 与ALOJA以及PaaS服务概览,之后介绍了SQL基准以及PaaS服务的演进变化,最后分享了从云上的SQL-on-Hadoop中获取的经验.

【Hadoop Summit Tokyo 2016】云上的大象

本讲义出自Sanjay Radia在Hadoop Summit Tokyo 2016上的演讲,主要分享了基于云上的Hadoop架构设计以及解决方案,并分享了云上的共享数据存储相关内容以及如何通过使用Cache策略增强Hadoop的性能表现,以及如何保障云上共享数据的数据安全以及进行数据治理等相关知识.