《中国人工智能学会通讯》——6.23 Yoshua Bengio: 深度学习崛起带来人工智能的春天

6.23 Yoshua Bengio: 深度学习崛起带来人工智能的春天

20 世纪 50 年代,计算机开始在象棋领域战胜人类,证明数学定理,让人类狂喜不已。60 年代,人们越来越希望,不久以后,科学家就能用硬件和软件复制人类大脑,“人工智能”可以完成任何任务,其表现不逊于人类。1967 年,今年年初逝世的麻省理工学院教授 Marvin Minsky(MIT 人工智能实验室的联合创始人,人工智能先驱)宣称,十年之内,人们可以解决人工智能这个难题。

当然,结果表明,当时就持有那份乐观主义,有些过早。被设计用来协助外科医生更好诊断病人的软件,以及模拟人类大脑、用来识别图片内容的网络,都辜负了人工智能发展初期的那份狂热。早些年,人工智能算法并不成熟,所需数据也比当时可以提供的数据还要多。计算机处理过程也很慢,以至于无法驱动计算机完成接近人类思维复杂性的大规模运算。

到了 21 世纪中期,打造媲美人类智能水平的机器之梦,几乎从科学界消失了。当时,甚至“人工智能(AI)”这一表达,都不再是严肃科学领域的用语。20 世纪 70 年代到 21 世纪中期,这段希望破灭时期,被科学家和作家们形容为一连串的“人工智能之冬”。

十年能发生多大的变化啊。2005 年初,人工智能的前景发生了引人注目的改变。当时,深度学习,这种灵感源自脑科学、打造智能机器的方法,开始取得成功。近些年来,深度学习已经成为推动人工智能研究向前的奇特(singular)力量。现在,一些主要的信息技术公司也正投入数十亿美元,发展深度学习技术。

深度学习,是指模拟神经网络,自己逐渐“学会”识别图像,理解语音甚至做出决策。这一技术依赖的是所谓的人工神经网络——目前人工智能研究的核心部分。人工神经网络,并不是精确模拟真实的神经元运作方式。而是以一般数学原理为基础,这些数学原理能够帮助网络从实例中学习,识别出图片中的物体或人,翻译世界主要语言。深度学习技术,已经变革了人工智能研究,重拾对计算机视觉、语音识别、自然语言处理以及机器人学的雄心。

2012 年,首次展示了第一款用于理解语音的人工智能产品——你可能对 GoogleNow 比较熟悉。紧接着,又出现了可以识别图片内容的应用,这一功能已经被吸收到谷歌相册的搜索引擎中。任何一个对繁冗的自动手机菜单感到沮丧的人都能体会,一款更好的智能手机私人助理会让操作变得多么便利。有些人记得几年前,在识别图片中的物体方面,人工智能的表现有多糟糕——当时的软件可能会把无生命的物品识别成动物——在这些人看来,计算机视觉上的进步,难以置信:在一定条件下,现在的计算机可以识别出猫、势头或者脸部以及人。现在,人工智能软件实际上已经成为数百万智能手机用户的生活的一部分。

就我个人而言,已经很少手动键入信息,而是直接对手机说出命令,有时候它甚至能给我反馈。这些进步已经突然为技术的进一步商业化打开了大门,而且兴奋度也有增无减。公司的人才争夺战也十分激烈,深度学习领域的博士极度供不应求。许多该领域的大学教授——据某些统计,是大部分教授——都从学术界跳槽到了产业中,公司为他们配备了齐全的研究设备,还有丰厚的薪资。解决深度学习的难题,已经带来让人吃惊的成功。

神经网络击败顶尖围棋选手李世石的消息,登上了新闻头条。相关应用已经延伸到其他人类专长的领域——而且这还不是游戏的全部。一项新研发的深度学习算法,旨在根据磁共振成像诊断心脏衰竭,就像心脏病专家那样。

时间: 2024-08-03 13:53:45

《中国人工智能学会通讯》——6.23 Yoshua Bengio: 深度学习崛起带来人工智能的春天的相关文章

《中国人工智能学会通讯》——2.27 利用深度学习改进统计机器翻译

2.27 利用深度学习改进统计机器翻译 利用深度学习改进统计机器翻译的核心思想是以统计机器翻译为主体,使用深度学习改进其中的关键模块,如语言模型[1] .翻译模型 [2] .调序模型 [3] .词语对齐[4]等. 深度学习能够帮助机器翻译缓解数据稀疏问题.以语言模型为例.语言模型能够量化译文的流利度,对译文的质量产生直接的重要影响,是机器翻译中的核心模块.传统的语言模型采用 n-gram方法,通过极大似然估计训练模型参数.由于这种方法采用离散表示(即每个词都是独立的符号),极大似然估计面临着严重

中国人工智能学会通讯——当知识图谱“遇见”深度学习 1.1 知识图谱与深度学习融合的历史背景

大数据时代的到来,为人工智能的飞速 发展带来前所未有的数据红利.在大数据的 "喂养"下,人工智能技术获得了前所未有 的长足进步.其进展突出体现在以知识图谱 为代表的知识工程以及深度学习为代表的机 器学习等相关领域.随着深度学习对于大数 据的红利消耗殆尽,深度学习模型效果的天 花板日益迫近.另一方面大量知识图谱不断 涌现,这些蕴含人类大量先验知识的宝库却 尚未被深度学习有效利用.融合知识图谱与 深度学习,已然成为进一步提升深度学习模 型效果的重要思路之一.以知识图谱为代表 的符号主义,以

《中国人工智能学会通讯》——6.4 基于深度学习的知识图谱构建

6.4 基于深度学习的知识图谱构建 随着深度学习在自然语言处理领域应用的不断深入,人们也开始尝试将深度神经网络用于知识图谱的自动构建.在此,以实体和关系的表示学习技术为基础,讨论深度学习在命名实体识别.关系抽取.关系补全等任务上的应用. 命名实体识别 命名实体识别是从文本中提取出和人名.地名等特定的短语或名称的任务.早期的命名实体识别主要基于规则和词典来进行,对规律性较强的文本环境较为适合,但难以摆脱对领域专家的的依赖,费时费力且难以移植[28] .随着语料数据的增长,研究者逐步将机器学习和统计

《中国人工智能学会通讯》——7.2 基于深度学习的自然语言处理

7.2 基于深度学习的自然语言处理 深度学习旨在模拟人脑对事物的认知过程,一般是指建立在含有多层非线性变换的神经网络结构之上,对数据的表示进行抽象和学习的一系列机器学习算法.该方法已对语音识别.图像处理等领域的进步起到了极大的推动作用,同时也引起了自然语言处理领域学者的广泛关注. 如图 1 所示,深度学习为自然语言处理的研究主要带来了两方面的变化,一方面是使用统一的分布式(低维.稠密.连续)向量表示不同粒度的语言单元,如词.短语.句子和篇章等:另一方面是使用循环.卷积.递归等神经网络模型对不同的

《中国人工智能学会通讯》——4.41 两种学习之间有什么区别?

4.41 两种学习之间有什么区别? 来 看 一 下 剑 桥 大 学 信 息 工 程 教 授 ZoubinGhahramani 对贝叶斯规划学习(BPL)的评价,他认为 BPL 对人工智能.认知科学和机器学习是一个重大的贡献.深度学习目前已取得了重要的成功,但是也必须非常清醒地认识到深度学习的局限性,因为深度学习需要大量的数据,并且在很多任务上表现很差. 深度学习(DL)主要解决的是计算机"运筹帷幄"的问题,实现"要从大量数据形成抽象":而贝叶斯规划学习(BPL)主要

中国人工智能学会通讯——金融机构的市场机遇与实践 1.4 人工智能——系统实现关键

1.4 人工智能--系统实现关键 最后一页是我的机器学习在金融科技中的实践体会.人工智能在书本里有比较清楚的定义,但是在工程中,这个定义就变得非常模糊和难以把握.我这里讲最基本的四个步骤:数据处理.特征提取.模型训练和评价测试. 工程的数据处理中,很多时候删除样本比增加样本更加重要.今天谭院士讲人工智能不是万能的,最关键的是把技术边界做好,能做的做,不能做的投降,这样最后系统的准确率和稳定性就提高了.但是数据删除,也就是挑选数据或者是过滤数据,好比是在数据中砍几刀.我们认为能够正确砍出这几刀的人

中国人工智能学会通讯——金融博弈下的价值学习 1.1 多代理环境下的博弈与学习

1.1 多代理环境下的博弈与学习 我们考虑的是多代理环境下的博弈与学习.对于通常情况下的机器学习,我们有很多的知识了解,那么在我们不知道的环境下该怎么处理?这种情况下我们考虑的是对抗性学习和博弈学习.这样的应用目前已经越来越多,特别是在金融和经济学里. 关于对抗性学习,前面的报告提到GAN的网络,在这方面我们也可以考虑到反垃圾邮件时,filter要经常转变. 博弈学习是另外一种情况,博弈学习时,并不是完全对抗的,可能还会合作.在这种情况下我们对学习有什么样的理解. 这里最重要的一点是,我们有时并

《中国人工智能学会通讯》——3.4 网络表示学习的应用

3.4 网络表示学习的应用 由于基于神经网络的网络表示方法的高效性,它被越来越多地应用到除传统应用场景(如网络节点分类.推荐和链接预测等)之外的其他方面(如文本建模[17,28]和可视化处理[29] ). 文本语料可以表示为一个带权重的网络结构(节点表示词,边权重表示词与词之间共现的程度),因此网络的表示方法同时也可以应用到文本建模中.LINE [17] 模型一个重要的应用就是学习词的向量表示,相比现在流行的 Skip-gram 词向量模型,它具有效率更高和效果更好的特点.在文献 [17] 中,

深度学习再度点燃人工智能 安防成重点领域

过去5年间,计算能力的大幅进步触发了AI革命,谷歌母公司Alphabet.亚马逊.苹果.Facebook以及微软等科技巨头争先进入这个领域.尤其是自去年人工智能机器人大与人类棋手开展,人工智能关注度达到了一个新的高峰.其实,人工智能的发展可以追述到60几年前,但是因为技术的原因数次沉寂,直到深度学习的出现,让人工智能再次掀起热潮. 深度学习再度点燃人工智能 安防成重点领域 什么是深度学习? 深度学习是机器学习方法之一,而机器学习则是让计算机从有关我们周围世界或其中某个特定方面的范例中学习,从而让