Hadoop为IT企业利用的10种方式

Hadoop曾帮助Google在搜索引擎和广告方面取得了举世瞩目的成就。从Hadoop长长的用户名单中,可以看到Facebook, 可以看到Linkedin,可以看到Amazon,可以看到EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP…。如今的Hadoop早已不仅是当年的老二Yahoo的专用产品了,除了国外的大公司,国内还有淘宝、百度等等互联网巨头。

今天我们就来探讨,Hadoop 作为基础云计算平台,除了广告,IT公司还用哪些方式在利用Hadoop。

  1. 在线旅游

云计算供应商Cloudera COO Kirk Dunn 表示,目前上80%的世界在线旅游使用了Cloudera 的Hadoop服务。他没有透露具体的名单,但著名的Orbitz Worldwide是我知道的客户之一。

  2. 移动数据

目前Cloudera为美国70%的智能手机提供Hadoop支持,我们可以确定Dunn讲的是无限供应商支持的移动数据储存和处理。

  3. 电子商务

Dunn 表示Cloudia为美国超过1000万在线商家提供Hadoop服务,eBay是他们的一个大客户, 因为其要管理一个庞大的个人卖家市场,卖家数量达到1000万以上。而Ebay在用Hadoop服务90天后,纯利润增加了3%。

4. 能源发现

雪佛龙代表解释了他们公司利用Hadoop的实例:通过分类和处理海洋地震数据可以预测石油储备状况。

5. 节能

雪佛龙代表同时还表示Hadoop还用在节能上,雪佛龙利用Hadoop来支持其节能系统,顾客们按照系统提示节能的同时也节省了不少钱。而相关人士甚至表示这个理念可以用到精确和长期的基金预测上。

  6. 基础架构管理

越来越多的IT公司在收集和分析他们的服务器数据,在Cloudera讨论会上, NetApp代表表示他们公司利用Hadoop技术从全部的安装点上收集设备logs(超过千万亿的logs数量)。

  7. 图片处理

创业公司“Skybox图片”正是利用Hadoop来储存和处理图片的,这些图片是卫星根据地理变化的模式有规律地抓取的高清图片。Skybox最近获得了7000万美元的融资。

  8. 欺诈识别

这是个经典实用的话题,这在财政机构和情报机构非常有市场。Cloudera客户之一Zions Bancorporation表示他们利用Hadoop储存一切可能预示欺骗性的用户交易和异常情况数据。

  9. IT安全

除了基础架构管理,IT公司们也开始用Hadoop来处理恶意软件和网络攻击数据。去年Trust

就用hadoop为各种IP评定分数,然后各大公司就可以决定是否接受那些恶意IP的来访。

10. 医疗健康

目前Apixio正使用Hadoop来帮助他们对病人的回答做语义分析,从而帮助医生,护士更好的掌控病情。

Hadoop定义:

1. 一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。

2. Hadoop是一套开源的、基础是Java的、目前能够让数千台普通、廉价的服务器组成一个稳定的、强大的集群,使其能够对pb级别的大数据进行存储、计 算。已经具有了强大稳定的生态系统,也具有很多使用的延伸产品。比如做查询的Pig, 做分布式命名服务的ZooKeeper, 做数据库的Hive等等。

时间: 2024-09-30 10:11:03

Hadoop为IT企业利用的10种方式的相关文章

改善私有云自助服务门户网站的10种方式

私有云门户允许用户利用云计算的自助服务优势.企业按照以下10种方式和步骤来保证用户的满意度,并确保其运行顺利. 云计算以其自助服务模式而闻名,它允许用户配置和管理资源,而不需要直接的IT干预.大多数自助服务互动通过基于网络的门户进行.但只是为其私有云创建一个门户是不够的;开发人员需要以有意义的方式设计和实施它们.否则,门户网站和企业的私有云可能会被淘汰. 以下是创建高级私有云自助服务门户的10种方式. (1)满足用户的实际需求 如果不首先了解工具要解决的问题,就不能创建工具.有时,设计师投入大量

从流程的自动化中获得最大价值的10种方式

本文讲的是 :从流程的自动化中获得最大价值的10种方式,流程自动化很好,如果它可以节省时间并减少错误.但是如果它不能在业务流程中"很好地契合",那么会难以得到普及.问问有谁没有对语音助手感到伤脑筋. 所幸的是,某些最佳实践让你可以从流程自动化中获得最大价值,以下就是其中的10项. 1.保持简单 一个流程自动化项目越复杂,那么就会出现越来越多的故障点,就越难以修复.当数据切换简单易行,你不要做太多干预的时候,自动化的效果是最好的. 2.如果是语音自动化,必须是单音节! 转向采用基于语音技

BYOD提升企业生产力的5种方式

自带设备(BYOD)是近年来管理圈流行的一种技术趋势.然而,很多管理者依旧选择忽略它或者贬低它的重要性.BYOD是一个允许员工使用自己私人设备(笔记本,智能手机,平板电脑)访问公司网络的政策.   基于云的软件以及SaaS已经渗入了很多行业,这也让个人设备和公司设备的界限变得模糊了.如今,越来越多的软件都已经驻留在云端,移动设备也变成了访问服务器信息的硬件设备.因此,从哪个设备访问信息变得无关紧要起来.云端越安全,设备采用的阻力也越小. 2014年Tech Pro展开的一份研究显示,75%的公司

10种方式帮你最大限度利用IT审计

不管你喜欢与否,每个人都得留着预算,并定期进行IT审计.但是仍然有一些创造性的方法最大限度利用你的IT审计开支.这里有10种方法. 1.用最佳实践收紧政策和程序 审计公司和数千家企业合作,他们了解新法规和合规性要求.在很多情况下,这些公司制定策略模板和流程,当你与他们合作的时候他们愿意与你分享.这会简化你自己的策略和流程制定,因为一开始你就从审计师那里拿到了通用的"最佳实践"模板. 2.提高你的非正式审计能力 如果你希望提高你自己的内部审计能力,那么一个良好的开端就是,让你员工中那些负

应对企业云安全的10种基本对策

企业正在逐渐意识到云计算所带来的优势,不论是在提升资源利用效率和节省IT投入的整体成本方面.而云安全也随之被提到了前所未有的高度,当IT迁移到云端时,企业需要考虑基本的安全对策,本文将为您介绍10种基本的云计算安全技巧. 1.确认现有的基础控制 基础控制是企业安全理念的核心.它们包含了将近60个保护您企业最重要资产的安全控制.它们专注在确保云技术对您业务的应用,以及您的操作是符合安全控制. 2.专注工作负载 云安全.企业信用直接与工作负载相关.每个工作负载都有独特的考虑,如管理因素和用户的依赖关

2012年云计算将破坏企业的10种方式

2012年将带来什么?一个可能的座右铭为即将到来的一年可能是"云第一,但同时也要看到效益".云将成为仅仅是收购IT服务和新应用接受的方式.然而,伴随着公司的IT预算紧张,他们希望看到价值--通过已经应用的云计算. 正如我们总结了一年,现在让我们向前看,2012年云计算将带来什么: 1)"云"的概念炒作将渐渐变淡,因为这将是我们工作的一种方式,我们现在得到的云概念是应用程序和服务交付平台.云将保持甚至比以往任何时候都强,但是,具有讽刺意味的是,它可能也即将开始,似乎超

在2016年挖掘云端能力的10种方式

在2015年,行业研究显示,88%的企业在使用某种云技术.尽管如此,仍然有很多种方法可以利用还没有被广大企业开发的云.下面就是其中10种方法. 1.应用开发和测试 通过将应用开发和测试活动外包到云中,一些大公司已经可以推迟甚至取消他们自己数据中心内昂贵的硬件升级.方法是在云上按需地.租赁的基础设施中进行应用开发和测试,然后在应用可以安装在生产环境中的时候导入这些应用. 2.用于灾难恢复的备份选择 大公司必须有资源在全球设置多个数据中心用于灾难恢复和故障转移.但是大多数中小企业却做不到这一点.即使

企业通过哪三种方式选择ERP实施方?

ERP的关键是需要一个有丰富管理和实施经验的实施方,选实施方比选软件更重要.选择一个合适的专业化的实施方对ERP项目非常重要. 近年来我国企业迅速发展,规模不断扩大,如何在激烈的竞争环境中整合资源,增强企业竞争力是企业必须解决的问题.随着信息化的深入,越来越多的企业已认识到信息化的重要性,并把信息化作为提升管理水平的工具.于是,全国上下掀起了ERP普及风暴,企业都在上ERP或者准备上ERP.面对如此诱人的市场前景,国外ERP巨头纷纷抢摊中国市场,国内企业不甘示弱,纷纷揭竿而起分食ERP这块诱人的

IT企业利用云计算平台Hadoop的10种方式

如果你是世界上广大Hadoop用户的一员,你肯定知道Google曾经靠着分布式计算技术(Hadoop),在搜索引擎和广告方面取得了举世瞩目的成就.现在的Hadoop不仅是当年的老二Yahoo的专用产品了,从Hadoop长长的用户名单中,可以看到Facebook, 可以看到Linkedin,可以看到Amazon,可以看到EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP- 国内的公司有淘宝.百度等等.而今天我们要探讨的是,Hadoop 作为基础云计算平台,除了广