IT企业利用云计算平台Hadoop的10种方式

如果你是世界上广大Hadoop用户的一员,你肯定知道Google曾经靠着分布式计算技术(Hadoop),在搜索引擎和广告方面取得了举世瞩目的成就。现在的Hadoop不仅是当年的老二Yahoo的专用产品了,从Hadoop长长的用户名单中,可以看到Facebook, 可以看到Linkedin,可以看到Amazon,可以看到EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP…

国内的公司有淘宝、百度等等。而今天我们要探讨的是,Hadoop 作为基础云计算平台,除了广告,IT公司还用哪些方式在利用Hadoop。

1. 在线旅游

云计算供应商Cloudera COO Kirk Dunn 表示,目前上80%的世界在线旅游使用了Cloudera 的Hadoop服务。他没有透露具体的名单,但著名的Orbitz Worldwide是我知道的客户之一。

2. 移动数据

目前Cloudera为美国70%的智能手机提供Hadoop支持,我们可以确定Dunn讲的是无限供应商支持的移动数据储存和处理。

3. 电子商务

Dunn 表示Cloudia为美国超过1000万在线商家提供Hadoop服务,eBay是他们的一个大客户, 因为其要管理一个庞大的个人卖家市场,卖家数量达到1000万以上。而Ebay在用Hadoop服务90天后,纯利润增加了3%。

4. 能源发现

雪佛龙代表解释了他们公司利用Hadoop的实例:通过分类和处理海洋地震数据可以预测石油储备状况。

5. 节能

雪佛龙代表同时还表示Hadoop还用在节能上,雪佛龙利用Hadoop来支持其节能系统,顾客们按照系统提示节能的同时也节省了不少钱。而相关人士甚至表示这个理念可以用到精确和长期的基金预测上。

6. 基础架构管理

越来越多的IT公司在收集和分析他们的服务器数据,在Cloudera讨论会上, NetApp代表表示他们公司利用Hadoop技术从全部的安装点上收集设备logs(超过千万亿的logs数量)。

7. 图片处理

创业公司“Skybox图片”正是利用Hadoop来储存和处理图片的,这些图片是卫星根据地理变化的模式有规律地抓取的高清图片。Skybox最近获得了7000万美元的融资。

8. 欺诈识别

这是个经典实用的话题,这在财政机构和情报机构非常有市场。Cloudera客户之一Zions Bancorporation表示他们利用Hadoop储存一切可能预示欺骗性的用户交易和异常情况数据。

9. IT安全

除了基础架构管理,IT公司们也开始用Hadoop来处理恶意软件和网络攻击数据。去年Trust

就用hadoop为各种IP评定分数,然后各大公司就可以决定是否接受那些恶意IP的来访。

10. 医疗健康

目前Apixio正使用Hadoop来帮助他们对病人的回答做语义分析,从而帮助医生,护士更好的掌控病情。

Hadoop定义:

1. 一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。

2. Hadoop是一套开源的、基础是Java的、目前能够让数千台普通、廉价的服务器组成一个稳定的、强大的集群,使其能够对pb级别的大数据进行存储、计 算。已经具有了强大稳定的生态系统,也具有很多使用的延伸产品。比如做查询的Pig, 做分布式命名服务的ZooKeeper, 做数据库的Hive等等。

(责任编辑:吕光)

时间: 2024-10-24 20:34:53

IT企业利用云计算平台Hadoop的10种方式的相关文章

企业利用云计算实现收入增长的5种方法

虽然IT厂商通常会推出具有成本效益的产品来吸引企业购买,但单靠成本节约并不能吸引企业购买.对于很多企业而言,收入增长更具吸引力. 云计算和云存储在很多领域已经成为"节约成本"和"提高企业底线收益"的代名词,但云计算http://www.aliyun.com/zixun/aggregation/27478.html">鲜为人知的一面是,能够帮助企业提高其收入水平. 究竟云计算如何帮助企业实现收入增长呢?让我们来看看下面5种方法. 1. 准备比实际需要更

企业服务云计算平台案例分享

企业服务云计算平台案例分享 •项目背景.需求及目标 •解决方案.系统架构 •平台优势.挑战 •平台技术架构与设计 •多租户技术实践 企业服务云计算平台案例分享

改善私有云自助服务门户网站的10种方式

私有云门户允许用户利用云计算的自助服务优势.企业按照以下10种方式和步骤来保证用户的满意度,并确保其运行顺利. 云计算以其自助服务模式而闻名,它允许用户配置和管理资源,而不需要直接的IT干预.大多数自助服务互动通过基于网络的门户进行.但只是为其私有云创建一个门户是不够的;开发人员需要以有意义的方式设计和实施它们.否则,门户网站和企业的私有云可能会被淘汰. 以下是创建高级私有云自助服务门户的10种方式. (1)满足用户的实际需求 如果不首先了解工具要解决的问题,就不能创建工具.有时,设计师投入大量

从流程的自动化中获得最大价值的10种方式

本文讲的是 :从流程的自动化中获得最大价值的10种方式,流程自动化很好,如果它可以节省时间并减少错误.但是如果它不能在业务流程中"很好地契合",那么会难以得到普及.问问有谁没有对语音助手感到伤脑筋. 所幸的是,某些最佳实践让你可以从流程自动化中获得最大价值,以下就是其中的10项. 1.保持简单 一个流程自动化项目越复杂,那么就会出现越来越多的故障点,就越难以修复.当数据切换简单易行,你不要做太多干预的时候,自动化的效果是最好的. 2.如果是语音自动化,必须是单音节! 转向采用基于语音技

站长利用A5宣传网站的N种方式及错误做法

中介交易 SEO诊断 淘宝客 云主机 技术大厅 A5的强大离不开众多站长的支持,同时也让更多站长对A5形成了习惯性的依赖,是网站管理者.程序员.美工.SEOER.编辑等互联网业界从业人员几乎天天必关注的平台,通过这里了解国内外重大互联网事件,学习运营推广和技术优化,同时也通过A5平台不断的去尝试宣传自己的网站. 本文整理了部分站长们在A5所经常使用的AD方式,以及一些错误的做法,如有不全或观点不赞同,请站长补充和纠正,万分感谢! 一.A5首页软文宣传法 A5首页的文章是站长们AD必争之地,上了首

Hadoop为IT企业利用的10种方式

Hadoop曾帮助Google在搜索引擎和广告方面取得了举世瞩目的成就.从Hadoop长长的用户名单中,可以看到Facebook, 可以看到Linkedin,可以看到Amazon,可以看到EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP-.如今的Hadoop早已不仅是当年的老二Yahoo的专用产品了,除了国外的大公司,国内还有淘宝.百度等等互联网巨头. 今天我们就来探讨,Hadoop 作为基础云计算平台,除了广告,IT公司还用哪些方式在利用Hadoop. 1

2012年云计算将破坏企业的10种方式

2012年将带来什么?一个可能的座右铭为即将到来的一年可能是"云第一,但同时也要看到效益".云将成为仅仅是收购IT服务和新应用接受的方式.然而,伴随着公司的IT预算紧张,他们希望看到价值--通过已经应用的云计算. 正如我们总结了一年,现在让我们向前看,2012年云计算将带来什么: 1)"云"的概念炒作将渐渐变淡,因为这将是我们工作的一种方式,我们现在得到的云概念是应用程序和服务交付平台.云将保持甚至比以往任何时候都强,但是,具有讽刺意味的是,它可能也即将开始,似乎超

外贸企业利用数据库平台找买家

数据库营销是一个主动营销的过程,它通过对客户信息的管理实行批量化沟通.数据库营销能帮助你保留客户.提高客户的忠诚度,一些外部购买的数据库则可能是你 大量客户的来源.外贸企业除了可以从外部购买.开发数据之外,更应该建立属于企业自己的数据库,这是一个长期累积的过程. 自身数据库的建立是一个漫长的征程,外贸企业不可能一开始就完全依靠自身的数据库,因此必须通过购买外部数据库开发客户.外贸企业接触较多的一般是海关数据库和一些数据库平台等,其中,康帕斯(Kompass).Thomas等就属此类数据库平台.根

10种方式帮你最大限度利用IT审计

不管你喜欢与否,每个人都得留着预算,并定期进行IT审计.但是仍然有一些创造性的方法最大限度利用你的IT审计开支.这里有10种方法. 1.用最佳实践收紧政策和程序 审计公司和数千家企业合作,他们了解新法规和合规性要求.在很多情况下,这些公司制定策略模板和流程,当你与他们合作的时候他们愿意与你分享.这会简化你自己的策略和流程制定,因为一开始你就从审计师那里拿到了通用的"最佳实践"模板. 2.提高你的非正式审计能力 如果你希望提高你自己的内部审计能力,那么一个良好的开端就是,让你员工中那些负