使用GPU构建更便宜的Google神经网络

  一些初创公司通过模仿Google的技术来推销自己,从实时网站更新技术到机器学习。Google Brain无疑是Google下一代项目之一,旨在利用谷歌已掌握的用户数据,使搜索和其它产品的行为表现得更智能化。现在,Google Brain的研究者之一向我们展示了如何靠GPU和无限带宽技术进行深度学习计算,并且价格比Google更低廉。

  正如Wired周一提到的,包括">斯坦福大学教授Andrew Ng(曾在Google Brain项目工作)和Google 研究员Jeff Dean在内的研究人员共同发表了一篇论文,讨论如何利用GPU完成CPU通常所做的高强度的工作,尤其是针对快速学习神经网络。据Wired文章中提到的,这样一个系统预计花费2万美元,而Google的标价是100万美元。

  在这项研究中,集群部署了16台服务器,每个服务器包含两个四核处理器,四个Nvidia GPU和一个无限带宽适配器。这些服务器通过无限带宽转换器连接。这篇论文中提到:“这种特殊的服务器配置是为了平衡GPU和CPU的数量,对于大规模的深度学习,这点很重要。”这套系统比以前的迭代版本更高效。

  我们已经通过这个系统证明,我们可以轻松地训练网络进行多于110亿个(是上一个最大型网络的6.5倍)参数的学习,并且只用了不到2%的机器。

  研究看起来像是GPU的另一个有力宣传,对于Nvidia和其它类似AMD的GPU制造商来说也有好处。Nvidia GPU已经被应用在目前最快的超级计算机中,现在被应用到更传统的数据中心中看起来似乎有点道理的。(据我们同事之前的一篇文章,打破记录的天河二号超级计算机并没有使用GPU,而是融合了Intel Xeon E5-2600芯片和Xeon Phi协同处理器,所以GPU的竞争还有路要走)当然,虽然这项研究使我们更加确信有高性能计算并不是不切实际的,同时基于GPU的云服务也是可行的。AWS很早之前就提出希望利用GPU进行高性能计算,并且其整合了Nvidia GPU的集群GPU实例已经有了一些商业应用,如Peer1,SGI等。

  有趣的是,虽然Google在Google Brain项目中大量使用了GPU,但它并没有为其云平台发布GPU选项。研究人员的创新精神已经为Google开发了一个健全的商业模式,以服务的模式销售GPU时间。

  这项研究同时也促进了其它涉及GPU的人工智能项目。比如机器蜜蜂,通过一个公共的大脑来感知蜜蜂收集的数据。以更少的机器、更低廉的价格达到更快的认知模式,从而使蜜蜂更智能。

时间: 2024-10-09 09:41:29

使用GPU构建更便宜的Google神经网络的相关文章

新款MacBook Air更便宜更快

  苹果静悄悄地发布了新版的Macbook Air,主要升级了处理器并提供了更低的价格,但设计并未改变,也没有人们期待中的Retina屏幕,那么它是否值得购买呢?一起来探讨一下. 新款Macbook Air在国内的售价为6288元起(11英寸128GB版本),处理器相比之前有小幅的提升,从1.3GHz主频的酷睿i5-4250U升级为1.4GHz主频的i5-4260U,性能方面几乎可以忽略不计.至于显卡,依然使用了集成的Intel HD Graphics 5000,其他部分包括基本RAM.硬盘规格

有比共享经济模式新型CDN更便宜的CDN?截止目前并没有!

有比基于共享经济模式的新型CDN更便宜的CDN吗?怎么做到的? 但在经过仔细对比分析后会发现,这两个问题压根就不存在: 第一,部分云商.流媒体加速服务商的更低价仅为P2P加速服务价格,而星域CDN直播新品价格则为完整的CDN服务价格,两者根本无从放在同一水平线上比较. 眼下,视频企业的CDN成本主要由"外采CDN+自建CDN+P2P技术"三大版块组成.对于自身有一定技术实力的视频企业来说,除必须的外采CDN外,自建CDN和P2P技术都可由自身内部提供.而对那些自身技术实力稍弱或想把更多

《树莓派开发实战(第2版)》——2.5 用Apply和Chain构建更复杂的模型

2.5 用Apply和Chain构建更复杂的模型 Figaro提供两种构建模型的有用工具,称作Apply和Chain.这两种工具都是重要的元素.Apply可以在Figaro中引入Scala,利用其全部能力.Chain可以无限的方式创建元素之间的相互依赖关系.目前为止您所看到的复合元素(如If和复合Flip)可以特定的预定义方式创建依赖关系.Chain可以超越这些预定义依赖关系,创建您所需要的任何依赖. 2.5.1 Apply 我们从Apply开始,这个元素在com.cra.figaro.lang

《淘宝网开店 进货 运营 管理 客服 实战200招》——2.4 怎样在批发市场进到 更便宜的货

2.4 怎样在批发市场进到 更便宜的货 淘宝网开店 进货 运营 管理 客服 实战200招厂家一般是不愿意与刚起步的卖家合作的.现在,许多批发商将生意做到了网上.但是,在对对方的情况不了解,而且看不到实物的情况下,很容易发生货不对板的情况.所以,选择网上批发商时需慎重. 建议卖家就近找较具规模的批发市场,开店前期可以多逛几次,锁定几家合适的,最后再进行仔细筛选. 一般批发商不会轻易地将最实在的价格告诉第一次上门的客人,而是根据经验和标准去衡量,然后才酌情开价.这无疑给毫无经验的新卖家增加了一些难度

PCR反应中的强大新技术:让基因分析变得更快更便宜

雷锋网AIHealth栏目按:DNA在高温时可以发生变性解链,当温度降低后又可以复性成为双链.因此,通过温度变化控制DNA的变性和复性,加入设计引物,DNA聚合酶.dNTP就可以完成特定基因的体外复制,此即为PCR体外扩增DNA的原理. 范德堡大学的研究人员开发了一种PCR反应中扩增DNA链的新方法,据称这种技术可以让基因分析变得更快更便宜,研究人员称之为适应性PCR技术(adaptive PCR ),该技术的核心是通过左旋DNA调节和监控PCR反应过程. 左旋DNA 正常DNA是右旋双螺旋结构

Docker多步构建更小的Java镜像

本文讲的是Docker多步构建更小的Java镜像[编者的话]最新版Docker将支持多步构建(Multi-stage build),这样使用单个Dockerfile就可以定义多个中间镜像用于构建,测试以及发布等多个步骤,并且有效减小最终镜像的大小. [深圳站|3天烧脑式Kubernetes训练营]培训内容包括:Kubernetes概述.架构.日志和监控,部署.自动驾驶.服务发现.网络方案等核心机制分析,进阶篇--Kubernetes调度工作原理.资源管理及源码分析等. Github仓库: aru

毕业旅行出国玩机票更便宜

七月过半,学生陆续放假,近几年蔚然成风的学生"毕业之旅"."间隔年之旅"成为亮点业务,7.8月份是毕业旅行的高峰. 来自去哪儿网机票平台的数据显示,国内最热门的暑期机票搜索城市中,厦门.青岛.昆明.成都.重庆.杭州.三亚等跻身旅游城市前列,出境游则以香港.台北.首尔.济州岛.曼谷.清迈.巴厘岛最受欢迎. 暑期国内游机票价格整体呈小幅上涨,7.8月份价格走高,8月底逐渐回落.以传统暑期热门旅游地丽江为例,在去哪儿网机票页面使用价格日历查看,进入8月从上海飞往丽江的单程

WindowsPhone手机将比Android更便宜

谷歌上周成功收购MOTO手机业务使运营商不得不更关注Windows Phone手机,但自从去年首批上市的WP7手机以后,Windows Phone系统既没有重量级的手机发布,也没有价格便宜的普及型手机可以走量,这让大家对即将上市的Mango手机也心存疑虑.但运营商INQ的老板FrankMeehan给出了我们另外一种预言,WP7手机可以比Android手机更便宜. Frank Meehan认为,目前WIndows Phone手机的软件成本要比Android手机要低,Android虽然以自由,免费,

国内手机银行资费详情:比网银转账汇款更便宜

逛街购物没带钱包没带银行卡,怎么办?没关系,直接刷手机!当前,国内手机的普及率已经相当之高了,而手机银行的发展才刚刚起步.一项调查表明,八成以上受访的消费者希望将公交卡.银行卡等支付工具集成到手机上,因此,各家银行都不遗余力地推广手机银行.消费者只要巧用手机银行进行转账汇款.理财管理,不仅能够享受到方便快捷,而且还能够节省下不少手续费. 转账手续费大打折扣牌 开通手机银行,我们就能随时随地办理一些银行业务,不需要到银行网点排队,甚至直接省却了使用电脑,只要在手机上按几个键就能完成操作. 银率网理