凯文•斯拉文:算法塑造世界

The Making of a Fly,这是一本1992年出版的学术书籍,受研究者喜欢。2011年4月8日,一家书商对其的售价为170万美元,另一家书商标价220万美元。如果那时你买了他,说不定还捡到便宜了,因为此后书价一直在涨,4月18日涨到直到23,698,655.94美元。当然,这还不包括3.99美元的运输费!

这本书研究苍蝇遗传学,晦涩难懂,但何以高达2370万美元?故事并非杜撰,而是加利福尼亚大学伯克利分校的进化生物学家迈克尔·艾森真切遇到的事儿。

事情真相却是,天价源于算法“价格战”。两家书商都是用算法给图书定价,第一家书商利用算法将价格设定为另一家的0.9983倍,第二家算法则始终让价格保持为第一家的1.270589倍,高价则是因不受监管的算法相互“攀比”导致的。

在TEDGlobal2011中,算法专家凯文·斯拉文(Kevin Slavin)提起这个故事,并向观众展示了算法控制的图景。

他指出,我们正生活在算法设计的世界,并日益为算法所控制。它正悄然无息地进入生活,塑造着世界;斯拉文提醒,人类正在编写着自己都无法理解的甚至不受控制的代码。若算法出错,影响将会非常大。

“算法正直接迅速地改变着我们的生活方式”

算法(Algorithm)是指解题方案的准确而完整的描述,是一系列解决问题的清晰指令,代表着用系统的方法描述解决问题的策略机制。斯拉文把算法称之为计算机用于决策的数学。这是由人类从世界中提炼出的某种事物,但事实上它现在正转变为开始塑造世界的事物。

“它塑造着我们周围和内心的世界,甚至可以说它已经具有了真理的敏感性。”斯拉文说。

读者朋友会不会觉得有些抽象?我们先看看生活中的算法。

有一种新式电梯,在你进入电梯之前,你要按下你所要去的楼层的按钮,它使用的是装箱算法,让每个人能够进入想进的电梯。例如想去10楼的人进入二号电梯,想去三层的人进入五号电梯。

或者,它们就在你的屋子里。例如有两种不同的清洁机器人就是两种算法。

机器人对清洁的含义有着非常不同的理解。如果你让它慢下来,在上面放上灯光,你就能够看到其中的差异。“是不是有点像卧室里的秘密建筑师?”斯拉文形象地比喻,建筑本身在某种程度上就服从算法优化的想法,这并不牵强。

《算法改变生活》一文中把算法映射到鲜活的生活场景中,将算法对于生活的影响更直观地表现出来。你会发现,许多看似复杂的算法正在以非常直接的方式迅速改变着我们的生活方式。

例如令互联网搜索更加高效的基本算法“超链分析算法”;使用网上银行完成支付时帮助我们完成一系列安全检测动作的安全哈希算法;以及我们在做路线规划时,用迪杰斯特拉算法来寻找最短路径,这也是一个计算机领域图搜索计算的一个经典算法。

“算法正在形成改变我们文化的物理学”

如果你喜欢看美剧,就会知道前段时间很火的纸牌屋以及围绕其“大数据分析应用”的铺天盖地的新闻。《Netflix是如何用大数据捧火《纸牌屋》的》一文指出,Netflix曾花 1 亿美元买下版权,请来 David Fincher 和老戏骨 Kevin Spacey,首次进军原创剧集就一炮而红,在美国及 40 多个国家成为最热门的在线剧集。

作为世界上最大的在线影片租恁服务商,Netflix 几乎比所有人都清楚大家喜欢看什么。它知道用户喜欢 Fincher(社交网络、七宗罪的导演),Spacey 主演的片子表现不错,英剧版《纸牌屋》很受欢迎,这三点让其愿意在《纸牌屋》上赌一把,分析认为,它的成功得益于 Netflix 海量的用户数据积累和分析。

且不论纸牌屋的成功是否真的来源于大数据分析,还是只是将大数据应用作为宣传的噱头,Netflix的确在海量用户数据积累和分析上努力优化着算法。

他们开始用的是Cinematch,后来又尝试了一些其他的,例如Dinosaur Planet,Gravity,现在则使用Pragmatic Chaos,它试图把握住你,这样就能推荐你可能想看的电影。但斯拉文认为,这非常非常困难,如同Netflix的所有算法,算法最后只能决定60%最终被租用的电影。

但如果在这些电影制作之前对它们进行评价呢?

英国名叫Epagogix的数据分析公司就在做着这样的事情。来自英国的数据科学家开发出了一套针对电影剧本的语义分析算法“神经网络”,可对新的剧本进行分析消化,并预测其未来的票房情况。

你可以向他们提供你的剧本,它会将电影的剧本、情节、明星、拍摄场地等各种要素集合在一起,使用其自行研制出的算法预测电影票房收入,并量化地告诉你“这是个三千万美元票房的电影或是个两亿美元票房的电影。”

算法无法完全准确。但正如该公司首席执行官尼克·米尼表示:“拍摄电影的原因很多,我们的算法只是帮助人们更好地做决定,何乐而不为呢?”

不过,“重点在于,上述种种例子并不是谷歌,也不是信息,不是金融统计,而是文化,算法正在形成改变我们文化的物理学。”斯拉文说。

换句话说,算法正在塑造着我们所观察和感知到世界,它甚至改变着我们获取信息的方式。

“如果这些算法某天崩溃了?”

这让算法看起来具有无尽的用途,但我们是否曾经想过,算法控制的世界并非那么真切?控制本身也会受观察过程所影响。

谷歌流感趋势曾被认为是大数据应用的典范,但后来也批判为“大数据的傲慢”。实际上,算法结果会被各种因素左右。量子基金的乔治索罗斯提出过“自反性”概念,认为社会系统的参与者是有思想的,那么在这样的环境中,不仅观察,就连思想和信念都会影响到研究的对象,从而影响得出的结论。

更为严重的是,“如果这些算法,某天崩溃了出错了,我们怎么知道,那会是什么样子?”斯拉文提出了令人深省的警惕。这样的“无解”已经出现在股票市场中,算法失误曾导致美国华尔街股市崩盘。

2010年5月6日,整个市场的百分之九消失了五分钟,这被称为“2:45的瞬间崩溃”。突然之间百分之九的市值消失了,直到今天大家对发生了什么还不能达成一致,因为并没人下命令,没人要这么做。

那天,大家对所发生的事情束手无策,只能看着面前的屏幕上的数字和一个红色按钮上面写着“停。”事情就是这样,这就是我们正在编写的东西,甚至自己都读不懂。我们正在把一些事情变得难以理解,并已经对这个自己创造的世界中正在发生的事情失去理解能力。

“我们正在慢慢失去对自己创造的世界的理解和掌控。”斯拉文警告称。

微妙之间掘金

人类可以针对电梯设计出一种机器语言,可以控制其停在特定楼层,那么对于算法的控制可以做到什么程度?

回到华尔街。华尔街的算法依赖于高于一切的特质——速度,其运行时间以毫秒和微妙计算。何为微秒?想象一下,点击一下鼠标要花50万微秒的时间。如果你是一个华尔街的算法,落后5微秒,你就是失败者。

为达到快速我们都做了什么?

“微秒之间的掘金达人”曾用芝加哥和纽约之间光纤电缆的铺设为例解释了这种“代价”。

芝加哥一直都是期货合约交易的中心,期货合约是一种允许你将来某一特定时间以给定价格买卖某种商品(如玉米或猪肉)的协议。某些芝加哥交易所还允许人们以期货的形式买卖公司股票,这些公司的股票通常在纽交所上市交易。当然这些期货合约的价格与股票价格有着紧密的联系。

现在假设有一支股票的价格在纽交所(或者说在新泽西马瓦郊区的服务器中)发生了变化。可以肯定的是,芝加哥相关的期货合约的价格也将相应变化。但价格变化不会立即发生:通过连接两大金融中心的光纤电缆很长,股票价格变化报告需要7微秒或更长的时间才能到达芝加哥。

2010年6月,美国公司SpreadNetworks准备采用最短路径,在纽约市和芝加哥市之间铺设一条825英里光纤传输信道,其最终目的是将股票交易加快3微秒。该工程需要在山区爆破,造价不菲。

凯文·斯拉文表示:“我们正在用炸药和岩石锯打穿美国,让算法能早3微秒完成交易,所有的一切都是为了一个前所未有的通讯系统。”另外,一条连接加拿大新斯科舍省和英国索默塞的光纤连接已被建立起来,以满足股票交易员的需要,在60毫秒内在伦敦和纽约之间发送股票数据。

“你想一想,我们正在用炸药和岩石锯穿过美国,只是为了一个算法能快三微秒完成交易,为了一个没人会知道的通信框架,这有点命运天定论。”斯拉文说,有意思的不是钱,而是钱所激发的东西,我们实际是在用算法的效率改造地球本身。

斯拉文最后提到算法与自然的关系值得深思。

看看这张演讲开始就提到的照片,它由艺术家迈克尔·纳贾尔在阿根廷拍摄。经过数字化重塑后,你会发现所有山峰的轮廓遵循道琼斯指数的变化,其中的深沟险壑就是2008年的金融危机。

仔细回想,山峰的轮廓是不是与算法异常时的结果非常类似?风景不正是因人与自然之间的怪异协作产生的吗?或许这不是艺术或隐喻,而是预言,算法就是自然映射或者说,它就是自然。

谢谢大家!

原文发布时间为:2014-10-27

时间: 2024-11-09 08:11:37

凯文•斯拉文:算法塑造世界的相关文章

算法统治世界

摘要: 算法统治世界. 好吧,最起码算法统治互联网.但是鉴于互联网即将统治世界,所以这句话也没错.算法决定了你用Google搜索的结果,算法决定了新浪微博侧栏向你展示的话题,算法决 算法统治世界. 好吧,最起码算法统治互联网.但是鉴于互联网即将统治世界,所以这句话也没错.算法决定了你用Google搜索的结果,算法决定了新浪微博侧栏向你展示的话题,算法决定了Netflix向你推荐的电影,算法决定了你QQ对话窗弹出的横幅广告.技术巨头花费了大量时间来研究新算法以及调整旧算法.但是有些现成的算法却罕有

巅峰相遇:对话阿里AI大牛,用算法改变世界

如果你对人工智能感兴趣,渴望用算法改变世界: 如果你希望进入阿里,与业界技术大牛并肩作战: 如果你处于职业生涯的十字路口,希望听听前辈的成长经历: 如果你希望度过充实有意义的两个小时: ...... 8月9日晚,参与阿里技术直播,与巅峰相遇,一起对话阿里AI大牛! 阿里技术直播是什么? "阿里技术直播",是阿里技术策划.面向技术人的免费视频直播节目,旨在通过互动交流的方式为技术人分享行业前沿趋势.技术干货和技术人生. 经过近两月的精心打磨,阿里技术直播全面升级,华丽归来!首期直播邀请到

贝叶斯过滤算法

朴素贝叶斯分类是一种十分简单的分类算法,叫它朴素贝叶斯分类是因为这种方法的思想真的很朴素,朴素贝叶斯的思想基础是这样的:对于给出的待分类项,求解在此项出现的条件下各个类别出现的概率,哪个最大,就认为此待分类项属于哪个类别.通俗来说,就好比这么个道理,你在街上看到一个黑人,我问你你猜这哥们哪里来的,你十有八九猜非洲.为什么呢?因为黑人中非洲人的比率最高,当然人家也可能是美洲人或亚洲人,但在没有其它可用信息下,我们会选择条件概率最大的类别,这就是朴素贝叶斯的思想基础,维基百科上的词条http://z

活在终极算法的世界,是怎样一种体验?

想想你记录在世界上所有计算机里的数据:你的邮件.办公文档.文本:你发的微博.微信.推特:你的网页搜索.点击.下载.购买记录:你的信用卡.传真.电话.健康档案:你闲逛时被手机记录下来的信息:你拍过的所有照片:监控摄像机里的简短片段:你的谷歌眼镜片段.未来想给一个人写传记,他的"数据排放"可能是最准确.最详尽的素材. 当今世界上还没有哪种算法能利用所有这些数据,甚至美国国家安全局也不能.即使有,该算法也不知道如何将数据变成逼真的你.假设你带着自己的所有数据,然后把数据交给未来的终极算法会怎

算法帝国里的牛人们:欧拉

1791年,著名奥地利作曲家约瑟夫·海顿出席了乔治·弗里德里希·亨德尔在伦敦威斯敏斯特大教堂的盛大清唱剧<弥赛亚>的演出.演出快要结束时,海顿被上千名合唱队和管弦乐队成员感动得热泪盈眶,他在泪光中盛赞和他同时代的亨德尔"是我们所有人的大师". 与此同时,促进统计学发展的思想巨人之一.法国数学家皮埃尔-西蒙·拉普拉斯也惊叹地说了同样的话,但他指的不是亨德尔,而是莱昂哈德·欧拉. 欧拉毕业于巴赛尔大学,这所大学曾经培养了很多改变世界的知识精英.巴赛尔大学是瑞士最古老的大学,由教

算法帝国里的牛人们:莱布尼茨

戈特弗里德·莱布尼茨和同时代的艾萨克·牛顿一样,也是一位博学的通才.他涉猎的领域遍及欧洲大陆绝大部分有趣的学科.莱布尼茨曾说过,在哲学上只有两条绝对真理:神和虚无.万物皆由此二者而生.那么,我们就不难理解他为什么会想出只有0和1两个数字定义的计算语言了. 莱布尼茨发明了一种用1和0两个数字来表示数和一切运算(加减乘除)的数制.在他1703年发表的论文"关于只用两个记号0和1的二进制算术的阐释"中,这位数学家给出了二进制语言的定义. 莱布尼茨1646年生于莱比锡城,他出生的那条街道现在以

算法帝国里的牛人们:布尔

上一篇中我们提到了大牛莱布尼茨.他率先建立了人类思维可被分解为最基本的用二元判定来表示的单位结构.莱布尼茨说,这些二元选择可以被一个接一个地堆叠成任意长度,形成越来越复杂的思想或算法. 如果说莱布尼茨在构建统治人类生活的机器上迈出了第一步,那么与莱布尼茨相差了将近两个世纪的乔治·布尔就是那个继往开来.乘势而上的人.正是由于布尔发明的计算系统和创新的代数形式,网页才得以工作,我们才能上传照片到Facebook,在博客里码字.统治我们生活的复杂算法要是不能遵循人类的逻辑,那就一无是处了.比如,要跳转

IT人的算法书单:挖掘程序的灵魂

我们都知道对于软件而言,最为经典的定义就是程序=算法+数据结构,算法对于软件的重要性不言而喻,甚至可以说算法是程序的灵魂所在.甚至有人说如果计算机系只开设三门课的话,那么一定是:离散数学.编译原理还有算法和数据结构.算法(Algorithm)是指解题方案的准确而完整的描述,是一系列解决问题的清晰指令,算法代表着用系统的方法描述解决问题的策略机制.其实对于IT人而言,无时无刻都沉浸在算法之中,小到可能只是对于一个简单的一维数组进行排序,大到使用进行实时个性化推荐或者使用机器学习算法预测未来的发展趋

物联网之父凯文-阿什顿:物联网世界充斥着人工智能

MIT执行董事凯文·阿什顿  11月14日上午消息, BOE(京东方)全球创新伙伴大会·2017今日开幕.会上,MIT执行董事凯文·阿什顿表示, 物联网是一种方式,自动化的去获取全世界的信息和数据,通过传感器来收集世界的数据.除非能把数据变成某种行动,否则数据是没有价值的. 凯文·阿什顿称,在物联网世界中,所收集的都是物联网上面随时收集的关于世界实时的数据,而且是海量的,太多的信息.太多的细节.太多的东西,所以原来人工方式做不成,需要能自动收集数据的机器,自动分析数据的机器,这个过程充斥着人工智