数据改写未来!专访雅虎研发中心韩轶平

“雅虎有90%以上的价值由">数据驱动”——雅虎北京研发中心高级经理韩轶平

  谈到数据的时候,韩轶平颇显激动,他告诉记者,在雅虎内部,数据的概念已经深入人心。我们的工程师不是软件工程师,而是数据工程师;我们几乎所有的产品都是以数据驱动的;雅虎90%以上的价值由数据驱动。

▲雅虎北京研发中心高级经理韩轶平

  90%以上的价值由数据驱动?这样的数字足以让某些仍然无视数据存在的企业感到一阵恐慌。为进一步了解雅虎究竟是如何利用数据创造价值、雅虎的“数据平台化”进展,以及企业应该如何利用Hadoop实现数据价值的挖掘,IT168记者采访了雅虎北京高级研发经理、第五届Hadoop中国云计算大会的程序委员会联合主席韩轶平。

  一、 Hadoop现状“方兴未艾”前景更深更广

  对于Hadoop的前景,业界的看法不尽相同,而在韩轶平看来,就是八个字——方兴未艾、更广更深。

  IT168:你如何看待Hadoop的发展现状以及未来的应用前景?

  韩轶平:Hadoop现状可以用一个很恰当的词去形容,那就是“方兴未艾”。

  从我们最早在中国做Hadoop沙龙到今年第五届Hadoop in China这个会,也差不多是四年多将近五年的时间了。08年的沙龙,只是一些爱好者或者说感兴趣的人来参加,到09年第一次办大会的时候,唱主角的基本上就是雅虎、Facebook这几个美国的大公司。国内当然也有百度、中国移动这样开始做这些工作。那么到去年很多公司已经出现了,名字基本上报不过来了,基本上中国的互联网公司,比较大的公司都已经在用了,甚至包括其他行业的公司小公司。从今年报名的情况来看,今年将会有更多的公司加入进来。

  我们也看到,就是说最早期的时候,很多公司只是来了解一下情况,了解一下什么是Hadoop,大概干吗的。到之后慢慢的越来越多的公司是过来,就是了解具体到底我该怎么用,到底怎么样,我可以开始使用Hadoop,我可以参与。到现在更多是,通过使用以后,越来越多公司的人提出大家的一些想法,在使用中遇到的问题和经验,然后要求怎么样去改进Hadoop。

  所以,我为什么说方兴未艾呢?尽管这几年下来,Hadoop已经有了很大的发展,但是可以说,未来的市场会更大,有更多的公司将会参与进来,已经在使用的公司也需要有更多更深入的使用。

  Hadoop的应用前景可以分成几个方向:第一个方向是从横向来看,我们会有更多的应用,越来越多的应用,例如雅虎已经从最开始的搜索使用Hadoop,发展到现在雅虎大部分产品都在使用Hadoop。

  从纵向的来讲,一方面,未来除了互联网企业之外,会有更多的行业进入到。在美国现在已经有很多银行已经使用Hadoop。在中国我也听到有很多银行业、电力行业、通信行业等数据密集型的企业,他们也开始了解使用Hadoop,我想这是一个方向;另一方面,Hadoop的应用也会变得越来越深入。从最开始大家做一些简单的实验、离线数据处理,慢慢变成大规模的数据处理、线上产品的数据分析等。

  IT168:现在很多商业的公司都加入到Hadoop的圈子,有一些公司推出商业的版本,这是否意味着Hadoop的发展进入了一个新的阶段?是不是已经从学术届开始走入商业圈?这对开源社区的发展是否会有一定的影响呢?

  韩轶平:首先,Hadoop从来就不仅仅是一个学术性的东西。Hadoop的起源就是作为一个商业应用开始的,最早Doug开始做Hadoop,很快就加入了雅虎,Hadoop的最初开发工作,就是围绕着一个很重要的商业应用——雅虎的网页搜索而进行的,然后慢慢的有其他公司的实际应用进入,它从来不是一个研究性的项目,一直就是一个很商业化的,很实用性的一个项目。

  一些公司从2009年甚至更早就开始做一些商业化的版本,更多的是做一些,比如说辅助工具、包装、解决方案、培训知识等等这些东西。这些东西起对于帮助Hadoop的普及起到了很大的效果,因为最初Hadoop的应用需要很多时间对Hadoop的相关知识进行学习,甚至需要很多对系统、分布计算等很多知识知识才能够做它的开发和部署。

  这些商业版本的出现使得Hadoop的应用大大简化,这使得很多没有很强技术背景的公司有能力去应用。更重要的是,在他们出现问题的时候,尤其是一些相对比较简单的问题,会有人直接给他们提供一些支持,这一点特别重要。这些商业版本可以说是让Hadoop从一个技术变成了一个商品。

  这对于对社区发展来还是具有很正面的作用,因为有更多的用户,就能意味着这个东西有更多的发展的机会,也能得到更多的反馈。

  另一方面,有专门的人去做或支持Hadoop,使得它本身推广中的一些问题,都能得到更好地解决,比如推广过程中没有人回答问题、没有足够的文档等。

(责任编辑:蒙遗善)

时间: 2024-10-28 00:19:18

数据改写未来!专访雅虎研发中心韩轶平的相关文章

阿里称雅虎研发中心不允许在华开展互联网业务

5月20日上午消息,针对雅虎在北京成立研发中心一事,阿里巴巴集团新闻发言人王帅今日在接受新浪科技独家连线时表示,雅虎曾两度向阿里巴巴提出该申请.按照双方达成的协议,该中心仅承担研发功能,不允许在中国开展互联网业务. 王帅透露,美国雅虎此前两度向阿里巴巴集团提出在中国成立研发中心的申请,鉴于中国研发优势.研发成本以及美国雅虎自身现状的考虑,阿里巴巴集团最终批准了美国雅虎的申请. "按照双方此前的协议,美国雅虎的中国研发中心仅承担研发中心的功能,不允许在中国开展互联网任何领域的业务."王帅

苏宁 IT 总部消费者研发中心许宏平:如何用“黑科技”做“懂你”的门店?

近期,第三届中国商业O2O信息与数据高峰论坛暨新技术新方案展示会在北京举行.在会上,苏宁 IT 总部消费者研发中心副总经理许宏平分享了苏宁近几年在新零售方面的尝试和"AI+大数据"等技术在线下门店的应用情况. 许宏平表示,个性化服务弱,商品定位不精准.场景单一导致坪效降低,这些都是传统实体店面临的现实问题. "因此苏宁在线下进行大范围的布局,云业务方面我们在做农村服务站,今年上半年达到了2200家的规模,大概是100亿+GMV,今年预估到今年年底是2500家.零售云这个部分4

雅虎高管强调北京研发中心与阿里无隶属关系

6月9日下午消息,雅虎全球高级副总裁杰夫·金德尔(Jeff Kinder)今日在北京出席雅虎研发中心成立仪式时表示,该研发中心与阿里巴巴没有隶属关系,其主要任务是研发雅虎全球产品. "雅虎北京全球研发中心是我们全球第三大研发中心,它与我们在中国投资的阿里巴巴没有隶属关系,我们在这里要研发全球的产品."杰夫·金德尔说. 杰夫·金德尔透露,雅虎北京全球研发中心将研发产品主要涉及雅虎搜索.广告.个人用户产品,并涉及深层课题研究,以及一些大规模技术项目的实现.他还透露,雅虎北京全球研发中心对人

雅虎全球研发中心落户北京

商报讯(记者 罗添)昨日,全球最大的互联网公司雅虎宣布在北京成立全球研发中心,研究方向主要涉及搜索.广告.云计算和个人用户产品.这是雅虎继美国桑尼维尔.印度班加罗尔之后设立的第三个全球研发中心. 雅虎北京全球研发中心总经理张晨透露,雅虎北京全球研发中心已经规划了一年多时间.张晨表示:"全球极少有地区在人才方面和北京能够相匹敌,所以北京是很自然的选择."有分析认为,雅虎中国目前选择中国还有一方面原因,就是在其成本日益高涨的今天,中国相对廉价的人才优势打动了正遭受利润严重下滑的雅虎的心.

专访雅虎全球副总:希望阿里在华做好雅虎品牌

雅虎高级副总裁杰夫·金德尔(左)与北京研发中心总经理张晨接受新浪专访(马全智 摄) 6月11日凌晨消息,雅虎全球高级副总裁杰夫·金德尔(Jeff Kinder)近日在到访北京时接受了新浪科技专访,就诸多外界关注的热点问题进行探讨.他表示,希望阿里巴巴在中国继续经营好雅虎的品牌. 杰夫·金德尔这次过来北京专门为了出席雅虎新设立的北京全球研发中心.该中心于9日下午在北京举行了成立仪式,未来将为雅虎全球互联网用户研发产品. 在外界看来,今年1月雅虎新任CEO巴茨上台后,雅虎与其在中国的战略合作伙伴阿里

D1net阅闻:苹果在华首家研发中心落户北京 总投资3亿元

苹果在华首家研发中心落户北京 总投资3亿元 9月28日晚间,北京中关村园区管理委员会旗下微信公众账号"创新创业中关村"发布文章称,近日苹果研发(北京)有限公司在中关村朝阳园(靠近地铁14号线东湖渠站)成立,该公司注册资本1亿元人民币,投资总额3亿元人民币,共有员工约500人,致力于计算机软硬件.通讯.音频和视频设备.消费电子产品技术及信息技术等先进技术的研发,是苹果公司在中国第一家直接投资的研发中心.未来,该研发中心将致力于计算机软硬件.通讯.音频和视频设备.消费电子产品技术及信息技术

韩祖平G大调协奏曲

当资本与音乐相遇,投资里必定蕴含着一种艺术. 在古典唱片业不甚景气的今天,有什么新片能够热卖到断货,而且还是有100多张唱片的特大套集?然而这套由170张唱片组成的<莫扎特作品全集>仅在法国一个月就销售出1万套,全球逾30万套的销量更是让古典唱片业内人士叹为奇迹.在众多的演奏者当中,有一位钢琴家格外引人注目,因为在作品集的第二卷中,除了早期的几首协奏曲之外,大部分的钢琴协奏曲都是由他一人演奏,他就是美籍华裔钢琴家韩祖平(Derek Han). 韩祖平不仅在音乐领域有着深厚的造诣,同时也是一位长

雅虎北京研发中心称不靠高薪吸引人才

6月12日凌晨消息,雅虎北京全球研发中心总经理张晨在接受新浪科技专访时透露,该研发中心对人才能力要求比较高,但不靠高薪吸引人才.其核心竞争力是让员工有机会参与全球化的产品项目,以获得更好发展空间. 这意味着,雅虎这个绕过阿里巴巴在北京低调布局一年多的研发中心,已明确了它吸引人才的核心竞争力.一如张晨所言,北京是中国的硅谷,聚集了大量高素质的IT人才.但不容忽略的是,在雅虎之前,谷歌.微软.腾讯.百度等本土及外资企业已率先在 中国市场展开了人才竞争的布局. 谈到雅虎与其他企业竞争人才的法宝,张晨有

雅虎宣布关闭北京研发中心,裁员200至300人

据华尔街日报(博客,微博)援引消息人士称,雅虎昨天宣布将关闭雅虎北京全球研发中心,裁员200至300人.雅虎位于北京的办公室是该公司在中国大陆唯一的实体运营地点. 雅虎称已在本周三通知所有员工.自去年十月以来,雅虎已裁员700至900人,多数为美国以外地区员工. 雅虎发言人Carolyn Clark在给<圣荷西水星报>发的邮件中表示,雅虎将会公平.公正地安排受到影响的员工,协助他们渡过难关. 雅虎2009年设立的全球研发中心共有350多名员工,是由美国雅虎公司全权负责运营的研发机构,雅虎北京全