谷歌让机器人在云端协同学习,新技能高效get

什么?谷歌最近又有大动作?他们计划加速机器人学习进程,让更多机器人通过分享它们的经验,获取更多技能点?

是的!Google Brain team的Sergey Levine以及来自Alphabet的DeepMind和Google X 实验室的高手们通力合作,在几天前发了篇博文,说他们接下来要打造一个叫“多机器人通用技能学习”的机制。

众所周知,指导机器人做一些日常生活中最基本的事情已经困扰所有机器人学家几十年了。为了解决这个问题,谷歌科学家们决定让两大当红科技创新炸子鸡强强联手,看看能不能搞个大新闻。其一是云机器人——这个概念认为机器人可以在线分享数据和技能;另一个便是机器学习,也就是通过应用深度神经网络让机器人实现自主学习。

在科学家们进行的一系列实验中,独立的机械臂会不断重复一个指定的任务。不出意外的是,在长时间的任务执行过程中,每个机器人的技术水平都会得到一定提高,它能学会适应外部环境以及自身运动的轻微变化。但是,谷歌团队并没有就此满足。他们把机器人习得的这些经验输进一个大数据库里,从中建立技能模型,如此一来,机器人就可以更快更好地完成任务。

“机器人学习到的技能(比如推东西、开门等等)还是相对简单了点,但是通过快速高效的集体学习,在未来机器人的行动会更加丰富,这样它们就可以在日常生活中为人们提供各种各样的辅助了。”

早前,Levine和来自Google X 实验室的同事们展示了深度学习网络是如何帮助机器人自学抓物的。在那项研究中,一组机械臂不停地抓抓抓,抓了大概八万多次,简直丧心病狂。尽管一开始它们总是失败连连,但是通过神经网络的不断训练,成功率便有了显著的提高。

  在最近的一项实验中,谷歌科学家们测试了三个不同的场景。

第一个场景中,机器人从试验和错误实践中直接学习运动技巧。每个机器人从一套神经网络开始,尝试一次一次地开门。每隔一段时间,这些机器人们就会把它们性能数据传输给中央服务器,这个服务器会利用数据打造一个全新的神经网络,从而更好地分析运动和成功率之间的关系。接着,这个服务器会把更新完成的神经网络传输给机器人。“因为这个更新了的网络对动作幅度的估测更加精准,所以机器人们的表现会更好”,科学家们写道。“这个过程可以无限循环往复,从而不断提高机器人执行任务的能力。”

在第二个场景中,科学家们希望机器人可以学习如何与物体互动,这个互动的过程不只限于试验和错误实践,还包括建立内物体、环境以及它们自身行为的内部模型。比如,在刚刚提到的开门任务中,每个机器人都会有自己的一套神经系统,它们会和各种不同的物体互动。这些机器人会分享它们的经验,然后一起打造科学家们口中所谓的“单独预测模型”,让它们更好地了解与它们发生互动的物体。你可以通过单独一个机器人打造类似的预测模型,但是如果融合了许多机器人的经验的话,这个过程会快很多。

在第三个场景中,机器人在学习过程中会得到来自人类的帮助。要知道,人类和外界物体以及整个世界互动的过程中,总是有很多直觉。而在一些控制技能的帮助下,我们可以把这些所谓的直觉转化到机器人身上,让它们更好地学习这些技能。在实验中,一个科学家帮助一组机器人,开启各种不一样的门,而一个中央服务器控制的单独的神经系统会对它们的行动进行编程。接着,这些机器人会反复进行一系列的试验和错误实践,这个实践的难度会慢慢攀升,好让神经网络不断升级。“试验和错误学习以及人类指导的结合,让机器人在几个小时内,可以一起学习如何开门,”科学家们写道,“因为机器人训练开了各种外表不一样的门,所以在决胜局中,机器人们要开一扇它们从未见过的有一个把手的门。”这些科学家,小算盘打得溜溜的。

谷歌团队认为,它们的机器人的水平目前还是非常有限的。但是他们希望随着机器人和算法的进步和普及,集体学习能让机器人执行任务的能力大大提升:

在以上提到的三项实验中,机器人之间交流、交换经验的能力让它们能更好更快地学习。尤其是当我们将机器人学习和深度学习融合到一起的时候,交换经验的重要性就更不容忽视了。老早以前,我们就知道,在有大量训练数据的情况下,深度学习的运作会非常棒。比如,IamgeNet标准检查程序就利用了超过一百五十万经过分析的数据。而这些大量的数据,是不可能由单独一个机器人在几年的时间内收集到的。然而,如果是几个机器人协同作战的话,数周内我们就可以获取等量的数据。

如果你对这个研究方向感兴趣的话,可以猛戳此链接,读读谷歌研发团队po在arXiv上的文章,其中两篇他们已经投给了2017年的ICRA了哟。

本文转自d1net(转载)

时间: 2024-09-22 06:43:21

谷歌让机器人在云端协同学习,新技能高效get的相关文章

“云CIO”:需要学习新技能以保持高效

2012年2月20日,云计算及跨平台IT管理领先供应商CA Technologies在北京进行了一项亚太地区的调查报告的公布,这次报告的内容显示,CIO们期待能够在技术领域之外学到更多新技能,以便于更好地对不断变化的工作需求及时应变. <CIO的未来角色(亚太区)>报告对亚太地区共计270名CIO进行了调查,结果表明,有70%的受访者觉得自己需要学习新技能,以便未来能够继续保持高效.而半数以上(55%)的CIO表示希望掌握新技能,如深入了解监管及合规问题.隐私和数据保护法律以及知悉风险的必要性

BAIR论文:通过“元学习”和“一次性学习”算法,让机器人快速掌握新技能

我们都知道,深度学习是在大数据的背景下火起来的,传统的基于梯度的深度神经网络需要大量的数据学习,而绝大多数的深度学习内容否基于大数据量下的广泛迭代训练,当遇到新信息时往往会出现模型失效的情况从而需要重新进行学习.在机器人领域,深度神经网络可以是机器人展示出复杂的技能,但在实际应用中,一旦环境发生变化,从头学习技能并不可行.因此,如何让机器"一次性学习",即在"看"了一次演示后无需事先了解新的环境场景,能在不同环境中重复工作尤为重要. 研究发现,具有增强记忆能力的架构

谷歌为何研发机器人?欲卡位新人机交互

近日,谷歌在机器人领域动作频繁,出手收购了开发四脚兽机器人的波士顿动力公司.在http://www.aliyun.com/zixun/aggregation/11510.html">网络搜索和移动互联网.可穿戴搜索之外,谷歌在机器人市场潜心耕耘,其动机何在?美国科技网站TechCrunch发文分析称,谷歌是一家对数据永远充满饥渴的公司,而未来数据的来源将来自于线下世界,机器人将成为采集实体世界数据的工具. 一些人或许会问,谷歌还需要机器人项目吗?因为该公司已经掌控了移动互联网市场,全球十几

万户OA布局矿产行业 撬动协同矿业新时代

矿业是国民经济的重要支柱产业,矿产资源的可持续供给是社会经济可持续发展的基本保障.近年来,我国矿业获得快速发展,主要矿产品产量大幅度增长,跨入了世界矿产资源大国.能源生产大国和矿产品生产大国的行列.矿业的发展,有效支撑了国民经济持续.稳定与快速发展. 与此同时,在大中型矿产生产企业中,信息技术已获得广泛应用,信息化逐步由辅助生产经营管理转变为推动和引领企业管理模式创新,优化企业资源配置,提高经营决策水平,保障安全.清洁.高效发展的主要推动力. 虽然矿产行业信息化建设已经初显成效,但由于我国矿产行

微软小冰解锁“RPG冰段子”新技能

[TechWeb报道]7月14日消息,微软小冰更新解锁了名为角色扮演冰段子的新技能.技能发动非常简单,新浪微博用户只需@小冰后再@朋友,小冰 就会为你讲出以该朋友为主角的段子.很显然,以冰段子新技能之类的功能会给 网友带来更多欢乐,陆续微软小冰还将解锁其他新技能,本周解锁技能5项:根据海报给出的信息推测,下周还会解锁类似传话红娘的功能,具体怎么玩,我们还是拭目以待吧.微软小冰是微软 Bing搜索推出的智能聊天机器人,具有自主学习能力,在微博上线不久就深受广大网友喜爱,但是在微信生存的经历却异常坎

大数据新技能Hadoop有望高收入?

开源Apache Hadoop项目一直是个热门,这对于具备Hadoop及相关技能的IT求职者来说是个好消息. Matt Andrieux是旧金山Riviera Partners公司技术招聘部门负责人,他告诉我们对Hadoop及相关技能的需求在过去几年中呈直线上升趋势. Andrieux在接受电子邮件采访时还向我们透露:"我们的分析表明大多招聘企业是初创公司,它们正在招聘大量的工程师来帮助它们通过各种方式利用数据,让公司摆脱困境.很多公司都将它们的整个业务建立在数据收集和分析基础上,其实在任何行业

Android之父鲁宾正在谷歌开发机器人项目

Android之父鲁宾正开发机器人项目新浪科技讯 北京时间12月4日上午消息,据<纽约时报>报道,谷歌Android前主管安迪·鲁宾(Andy Rubin)正在开发新一代机器人,但这款产品不会瞄准消费市场, 而是主要服务于电子产品生产线,甚至有可能应用于零售领域,与亚马逊等企业展开竞争.鲁宾对<纽约时报>透露,谷歌的机器人项目着眼于十年后的愿景.该公司已经在美国和日本秘密收购了7家与机器人相关的公司,使之具备了开发移动机器人的能力.鲁宾还指出,仍然需要在软件和 传感器领域有所突破,

谷歌推企业网站移动化新服务 抢占移动终端市场

新浪科技讯 http://www.aliyun.com/zixun/aggregation/17197.html">北京时间4月5日晚间消息,谷歌(微博)今日推出一项新服务,允许企业将其网站转变为"移动版",从而适合智能手机访问. 业内人士称,谷歌此举使得企业网站更适合于移动用户访问,从而进一步强化谷歌在快速增长的移动市场的领先地位. 谷歌该项新服务是"走向移动"(Go Mobile)战略的一部分,该战略旨在帮助企业更好地利用移动平台,包括手机和平板

谷歌从此不再“不作恶”,新公司将“行正道”

对于谷粉而言,谷歌一直以来"Don't be evil(不作恶)"的价值观是他们引以为傲的精神信仰.这一价值观于1999年首次确认,在2004年被写入公司的首次公开招股书中.在当初设立这一准 则的时候,谷歌创始人之一的Amit Patel和部分早期员工担心,未来公司可能会因为部分客户的要求来调整搜索排名.或者做一些他们不情愿的事情. 10多年过去了,尽管在部分事件上,包括Google Reader的关闭.Android系统早期的"抄袭"问题,不作恶的口号引发人们对于