Google骂微软夸 Facebook开源数据中心王国
与严格保密的Google不同,Facebook不仅全新设计的服务器和数据中心,并且将其设计方案开源,这简直是对Google莫大的蔑视。每一个Google员工都需要签署一份保密协议,而这在Facebook根本不需要。就连一向保守的微软也沉不住气,公布了都柏林数据中心的部分细节。不过,据Google前员工透露,Google的数据中心十分强大。但开放的Facebook却获得了更多拥护者,包括英特尔、Dell、华硕、Rackspace都加入了Open Compute Project中。Wired记者Cade Metz深入Facebook位于Prineville的数据中心,采访了总经理Ken Patchett。
Facebook全新设计的服务器的开发代号为Freedom,该服务器可以适应大规模的社交网络的需求,而传统的服务器并不适合。宁可弃用HP、Dell那些品牌服务器,Facebook创造了“无浪费”(vanity-free)的服务器,甚至连蜂鸣喇叭都去掉了,这些服务器让数据中心运行效率更高。
开源服务器差不多占数据中心的一半。它们用作web服务器和内存缓存(数据存储在内存中,比存储在硬盘中可以更快读写),而传统的服务器还负责数据库业务。“在起步阶段,我们希望推出全新的服务器,”Patchett表示,“我们还要继续改进它,并拓展它的功能。”
开源服务器要比传统机架服务器略高,并可以容纳更大的风扇和导热管。风扇的转速虽然比传统服务器慢,但仍然可以排出同样多的空气,因此Facebook可以减少散热用的电能。同时,更大的导热管也不需要那么冷的空气来散热。
Google没什么了不起
Google的数据中心也在使用没有水冷散热的设计,他们也制造了自己的服务器,但Google对此并不愿多谈。尽管Google在2004年公布了数据中心和服务器的相关信息,但我们知道的也就仅此而已。Wird记者联系Google就此话题进行采访,但并未收到有价值的反馈。
据Google前工程师Dhanji Prasanna透露,Google的数据中心超越任何一个对手。但他并不愿透露更多信息。包括Ken Patchett在内的所有Google员工都签署了保密协议。
Facebook将其在Prineville的数据中心设计开源,并成为了Open Compute Project的一部分,这简直是对Google的莫大蔑视。“是时候公开数据中心的设计了,就像电影《格斗俱乐部》(Fight Club)崇尚不带面具的格斗一样,”Facebook技术副总裁Jonathan Heiliger表示。Facebook也将长久的帮助那些希望加入的公司进行数据中心设计。
“我们坚信,长远来看这将给我们带来更大的价值,”Heiliger说,“就像开源的软件一样,许多人正在看我们的设计。这仅仅是1.0版,我们希望它可以帮助每个人。”
以沙漠为开放代号
Facebook为自己设计了Prineville数据中心,它也同样认为自己的模式适用于整个业界,甚至更领先。2011年秋天Facebook发起了一个不以营利为目的Open Compute Project,并获得了许多业界巨头(如英特尔、华硕、Rackspace、NTT和Netflix)的支持。
在构建自己的数据中心方面,Facebook摒弃了Dell的解决方案。但这位IT巨头却说,Facebook的设计可以满足许多小型数据中心的要求。
某种程度上,Dell是为了维护自己的声誉。另一个层面上,这也许是一个噱头。但许多数据中心的设计者的确考虑将数据中心构建在Facebook的设计之上。
连线:揭秘Microsoft Bing与Google搜索背后的故事
Harry Shum已经在Microsoft研究院工作了11年,现在他负责研发Microsoft Bing搜索引擎,以对抗Google 搜索。(图片来自Microsoft)
在2010年,Google搜索引擎发生了重大变革。Google将其搜索迁移到新的软件平台,他们称之为“Caffeine”。Caffeine是Google出自自身的设计,Caffeine使Google能够更迅速的添加新的链接(包括新闻报道以及博客文章等)到自身大规模的网站索引系统中,相比于以往的系统,新系统可提供“50%新生”的搜索结果。
而这一切都要归功于Google开创性的MapReduce。Google搜索引擎算法只是其搜索引擎的一部分,在后台支持Google算法的基础设施才是真正的幕后英雄,其基础设施可快速的索引链接成千上万台普通服务器。MapReduce的成功也直接推动了Hadoop的发展。现今从Facebook、Twitter、eBay、LinkedIn以及eBay都受其影响,而为了适应大数据时代的浪潮他们必须有进一步的举措。
Google在基于Web的分布式计算系统领域已经赢得了赞誉。而Microsoft Bing搜索引擎的负责人Harry Shum认为Microsoft虽然没有“Caffeine”的支持,但Bing搜索(利用数以万计的服务器软件平台处理数据)的能力丝毫不输给Google。Google Caffeine的优势在于快速抓取、编制索引和服务器文档。而Bing在这方面也是非常出色的。但这一切都需要基础设施的支持。
Google与Microsoft在搜索领域的游戏还会继续下去,双方都意识到快速的更新索引已经变得非常重要。Google与Microsoft都在想一个新的方向发展(分布式数据库)。存储数据的设备分布在全球的服务器之中将成为未来趋势,但这同时需要更有效的组织方式。但这绝不是终点,搜索引擎技术的演进还会继续下去。
雅虎实验室云计算首席科学家Ramakrishnan跳槽微软
雅虎实验室搜索和云计算领域首席科学家Raghu Ramakrishnan
据悉,雅虎实验室搜索和云计算领域首席科学家Raghu Ramakrishnan已经从雅虎离职,跳槽至微软。Raghu Ramakrishnan在雅虎个性化技术开发方面也起到了关键作用。
消息人士透露,Raghu Ramakrishnan将在微软SQL团队任职。自2006年以来,Raghu Ramakrishnan一直在雅虎任职。
Raghu Ramakrishnan是在雅虎即将到来的研发部门裁员前流失的多名关键研究人员之一。雅虎高级研究人员流失并不让人感到意外。
美国云计算“三类”人才最为吃香
Wanted Analytics分析显示,发展过于迅速的云计算产业与相对较少的人才市场供给之间形成了巨大的用人缺口。数据显示,现在有约5000个有关云技术招聘的工作岗位,相比去年同期增长了92%,相比2010年,增长了4倍。Wanted Analytics称:“云技能人才需求增长如此之快,使得在美国,人才招聘与人才供应之间的缺口变的更大,困难变得更多”。
云计算产业需要人才
大部分云招聘需求来自云服务提供商。在上个月相关招聘中,VMware发布量最大,为360个。第二名为微软,230个;之后是Amazon.com,URS Corp和 Google。
其中,软件工程师,系统工程师和网络管理员是对技术技能要求最高的岗位,也最吃香。
招聘中,约四分之一的工作职位要求应聘者了解云计算相关知识,但技术工作者并非云计算的雇主所唯一寻求的。技术之外,他们还在寻求更多资源。比如,领先的非技术工作者,包括云技能所需的营销经理,销售经理,管理分析和金融分析师。这些属于基于云服务的市场营销,或市场推广服务等范畴。Wanted Analytics的分析师Carolyn Menz如此分析。
海盗湾抛“太空计划”:近地轨道设文件服务器
地球已经无法阻止海盗湾了!
近日,全球最大文件共享网站海盗湾(The Pirate Bay)今天在官方博客发表声明,透露了一项惊人计划:该网站将发射小型低轨道空间站,将文件服务器安置其中,以逃避政府机构的打击。
海盗湾在文章中称,这些空间站将被无人飞行器送至距离地面数十千米的近地轨道中,其搭载的服务器的传输速率可达100Mbps。该网站认为,这将大大提高政府机构查封服务器的难度。
由于涉嫌侵犯版权,海盗湾一直被瑞典及各国警方列为严厉打击的对象,其服务器多次被查抄。不堪重负的海盗湾终于做出一个艰难的决定:逃离地球,向太空发展。
然而,该网站直言,尚未就此目标制定任何计划。按照设想,这些空间站距离地面的高度仅为几十公里。相比之下,民航客机的飞行高度介于8千米至12千米之间,而我国神舟系列载人飞船的运行高度一般超过300公里。
更令人吃惊的是,海盗湾在文章结尾还表示,“将在全银河系的每个角落存储文件”。这显然已经不属于科技的范畴了,而是跨入了科幻行列。截至目前,该网站仍无法访问。
谁将会成为下一个“Dropbox”?比赛仍在进行中
似乎每一个云存储公司都想成为下一个Dropbox。
很容易理解他们为什么这么想,Dropbox现在号称有5000万用户,主要提供云存储、文件共享和实时同步功能,人们赞美它跨平台的易用性。它的成功也促使人们讨论这家位于旧金山的公司在其CEO Drew Houston的带领下是否是一个行业颠覆者或仅仅昙花一现。目前主要的平台供应商(微软、苹果、谷歌)都在做自己的基于云得文件共享和同步产品。VMware的Project Octopus和思杰收购ShareFile也被视为其将开发类似Dropbox功能的产品。
但也有几十个更小的、更灵活的云存储供应商想要在商场上复制“Dropbox”式的成功。Box是这些竞争者中最突出的,另外还有Egnyte、Accellion、ownCloud、GroupLogic、SurDoc等几家公司。Dropbox本身也没有坐以待毙,Dropbox刚刚收购了Cove以帮助建立其基础设施和服务水平。