从大数据到认知计算,未来需要更强的计算能力

认知计算是IBM提出的概念,认为“认知计算”是通过与人的自然语言交流及不断地学习,从而帮助人们做到更多的系统,是从硬件架构到算法策略、从程序设计到行业专长等多个学术领域的结合,能够使人们更好地从海量复杂的数据中获得更多洞察,从而做出更为精准的决策。IBM清晰地把认知计算定义为——具备规模化学习、根据目标推理以及与人类自然互动能力的系统。

  认知计算和大数据分析有何区别?

大数据分析属于认知计算的一个维度。与大数据相比,认知计算的范围更广、技术也更为先进。

认知计算和大数据分析有类似的技术,比如大量的数据、机器学习(MachineLearning)、行业模型等,大数据分析更多强调的是获得洞察,通过这些洞察进行预测。此外,传统的大数据分析会使用模型或者机器学习的方法,但更多的是靠专家提供。

对于认知计算而言,洞察和预测只是其中的一种。但是,认知计算更为强调人和机器之间自然的交互,这些维度都不是传统的大数据分析所强调。

此外,认知计算目前成长很快的一个领域为深度学习(DeepLearning),它的学习方法与传统方法不同,更多的是基于大量的数据通过自学的方式得到这样的模型,而不需要很多的人为干预,这个从学习方法来讲和大数据分析有很多不同的地方。

CPU、GPU、ASIC等传统计算资源的瓶颈

近十年来,人工智能又到了一个快速发展的阶段。深度学习在其发展中起到了中流砥柱的作用,尽管拥有强大的模拟预测能力,深度学习还面临着超大计算量的问题。在硬件层面上,GPU、ASIC、FPGA都是解决庞大计算量的方案。

在2006年的时候,人们还是用串行处理器处理机器学习的问题,当时Mutch 和 Lowe开发了一个工具FHLib(feature hierarchy library)用来处理hierarchical 模型。对于CPU来说,它所要求的编程量是比较少的并且有可迁移性的好处,但是串行处理的特点变成了它在深度学习领域的缺点,而这个缺点是致命的。时至今日,据2006年已经过去了十年,过去的十年集成电路的发展还是遵循着摩尔定律,CPU的性能得到了极大的提升,然而,这并没有让CPU再次走入深度学习研究者的视野。尽管在小数据集上CPU能有一定的计算能力表现,多核使得它能够并行处理,然而这对深度学习来说还是远远不够的。

GPU:虽然走进了研究者的视线,相比于CPU,GPU的核心数大大提高了,这也让它有更强大的并行处理能力,它还有更加强大的控制数据流和储存数据的能力。在 Chikkerur进行了CPU和GPU在处理目标识别能力上的差别,最终GPU的处理速度是CPU的3-10倍。

ASIC:专用集成电路芯片(ASIC)由于其定制化的特点,是一种比GPU更高效的方法。但是其定制化也决定了它的可迁移性低,一旦专用于一个设计好的系统中,要迁移到其它的系统是不可能的。并且,其造价高昂,生产周期长,使得它在目前的研究中是不被考虑的。

FPGA是计算的未来?

FPGA:FPGA在GPU和ASIC中取得了权衡,很好的兼顾了处理速度和控制能力。一方面,FPGA是可编程重构的硬件,因此相比GPU有更强大的可调控能力;另一方面,与日增长的门资源和内存带宽使得它有更大的设计空间。更方便的是,FPGA还省去了ASIC方案中所需要的流片过程。FPGA的一个缺点是其要求使用者能使用硬件描述语言对其进行编程。但是,已经有科技公司和研究机构开发了更加容易使用的语言比如Impulse Accelerated Technologies Inc. 开发了C-to-FPGA编译器使得FPGA更加贴合用户的使用,耶鲁的E-Lab则开发了Lua脚本语言。这些工具在一定程度上缩短了研究者的开发时限,使研究更加简单易行。

Linux On Power+GPU+FPGA=面向未来的认知计算

创新的Linux on power结合FPGA、GPU的计算模式,这也许是面向未来的认知计算最佳架构。

IBM在2015年宣布了与FPGA芯片设计商Xilinx进行“为期数年的战略协作”。两家公司将联起手来,通过OpenPOWER Foundation致力于找到更好的方法处理机器学习、网络功能虚拟化(NFV)、基因、高性能计算和大数据分析等应用程序。

IBM的开发人员将针对OpenStack、Docker和Spark建立解决方案堆栈,结合了基于POWER的服务器,并具备Xilinx FPGA加速器。

此外,McCredie还宣布该公司将把POWER 8芯片同Nvidia Tesla K80 GPUs结合在一起,使用NVIDIA的高速NVLINK互联。两家OEM——Penguin Computing和E4 Engineering将会把基于OpenPOWER设计理念的系统推向市场。

据IBM内部测试显示,与基于英特尔E5-2699 V3处理器的服务器相比,新Power Systems LC服务器能够以不到前者一半的成本运行Twitter简讯分析、网页视图显示等数据密集型工作负载,为客户每一美元的成本支出提供领先于前者2.3倍的性能。凭借其高效率的设计,LC服务器在相同的机架空间里能够比基于英特尔处理器的同等服务器多运行94%的Spark社交媒体工作负载。

用于商业计算和高性能计算的2插座2U Power Systems S822LC配备最多20个核、1TB内存和230GB/秒内存带宽。用于高性能计算的S822LC还配备NVIDIA特斯拉加速计算平台的旗舰组件——两个集成的NVIDIA Tesla K80 GPU加速器。与配置类似、基于x86架构的E5-2699 V3服务器相比,两款S822LC产品能够提供领先于前者逾2倍的单核性能、高于前者40%的性价比以及在满内存配置情况下超过2倍的内存带宽。

本文转自d1net(转载)

时间: 2024-11-10 11:03:00

从大数据到认知计算,未来需要更强的计算能力的相关文章

苏中博士:从大数据到认知计算

各位好, 今天讲的话题是我们对大数据.云计算.人工智能的一些观点. 大数据最大的问题就是大?到底有多大,这是我们做的预测,预测到2020年这个数据会到44个Z,这个数据量已经大到无法描述了.为什么会那么大?有一个很大的动因就是我们手里的手机,我们今天来参加这个大会,可能很多人拍很多照片,会把照片放到网上,或者也有很多的文字记录.那我们对2017年有这样一个预测,在我们移动端的数据,它的计算能力和存储能力将超过服务器端的能力,这是很可怕的一件事情.因为我们讲IT的行业是很大的一样,就像刚刚李院士包

专家:大数据给认知计算技术发展带来新机遇

北京(CNFIN.COM / XINHUA08.COM)--11日在此间 举行的 一场研讨会上,来自科研院所?高校及企业研发部门的国内外专家济济一堂,就大数据时代的认知计算发展展开热烈讨论?与会专家表示,大数据给认知计算技术的发展带来 新的机遇,认知数据的实践正倒逼认知科学的发展? 在这场名为"从大数据到认知计算"的研讨会上,多位专家 认为,大数据时代使认知计算面临前所未 有的发展机遇?中国工程院院士李德毅发表演讲说,在大数据时代,自然?生命?社交等多个领域http://www.ali

中国人工智能学会通讯——大数据与认知智能

今天的主题是机器学习和人工智能.首先讲机器学习,刚刚铁岩给了很好的介绍.如果用从处理数据集x和目标y的角度对机器学习进行简单分类,可以大致归纳为以下三点:第一,对于Supervised Learning,学习的核心是从x到y的映射.如果目标y是离散的,它就是分类问题,例如人脸识别就是一个机器学习的分类问题:如果这个y是连续变量,那就是回归问题,比如对雾霾的预测就利用了回归的方法.第二,对于Unsupervised Learning,只有一个x,没有y.第三,增强学习处于监督学习和非监督学习之间.

【开源访谈】 Kyligence 马洪宾:大数据的现在和未来

大数据经过这些年的发展,目前在社会层的接受情况如何?现阶段企业对大数据的主要需求体现在哪些方面?大数据领域未来会有怎样的发展方向?本期[开源访谈]邀请到 Kyligence 技术合伙人&高级软件架构师马洪宾,和大家聊聊大数据的现在和未来. [本期嘉宾] 马洪宾,Kyligence 技术合伙人&高级软件架构师,Apache Kylin 核心开发者和项目管理委员会成员(PMC),专注于大数据相关的基础架构和平台.毕业于上海交通大学计算机系.在工作于 Apache Kylin 之前曾经是微软亚洲

趣店转型 大数据技术精确计算用户信用值

ZD至顶网软件频道消息: 近期,成立仅两年多的趣店集团拟入股消费金融公司,借此持牌,积极谋划扩展自身在Fintech(金融科技)领域的布局. 据趣店联合创始人何洪佳透露,早在2015年初,趣分期就已经不再局限于校园,而开始布局非校园业务,转型后趣店用户结构发生了"群体变化"这样质的改变,目前已经全面停止校园地面推广. 目前,趣店非校园用户已逼近2000万,用户覆盖了白领.蓝领等消费群体.最令人瞩目的是,趣店借贷业务的逾期率只有2‰,仅为同行企业的1/10,实现良性循环.何洪佳表示,面对

大数据造车,未来之势还是噱头之谈?

文章讲的是大数据造车,未来之势还是噱头之谈,大数据,一个神秘却广为流传的名词,和前几年流行纳米概念一样,大大小小的行业开始涉足大数据的应用和处理,不管他们事实上到底对大数据有多少的掌握,只要是新型的事物和名词,在诸多行业都是一个赢得关注的吸引点,大家开始一窝蜂的涌入,然而又有几个最后做出了理论上和实践上经得起论证的东西呢? 当今的汽车相关产业,也是引领潮流或者被潮流引领的一大领域,中国有了大面积pm2.5污染,便有了很多厂商一股脑的用上了车内PM2.5过滤装置,然而很多人并没有用过,或者效果民泯

马云:大数据云计算是阿里未来核心战略

本文讲的是马云:大数据云计算是阿里未来核心战略[IT168 云计算]北京时间10月8日晚间,阿里巴巴集团董事局主席马云和CEO张勇在年报致投资者的公开信中表示,全球化.农村经济和大数据云计算将成为阿里未来十年的发展大方向,并表示将不惜一切投入发展数据技术,让数据和计算能力成为普惠经济的基础. "狭义的电子商务仅仅是今天阿里巴巴集团战略的一部分."马云在公开信中表示,阿里巴巴的战略是打造未来商业社会的基础设施,电子商务只是整体战略的第一步,"我们非常明白只有依靠互联网技术和大数

大数据时代:预测未来5年各行业发展趋势

大数据及互联网思维给了人类做整体未来决策有了超越以往的前所未有的体系支撑,用今天大数据的思维去重新提升传统行业,将对已有行业的潜力再次挖掘,甚至彻底改变这一行业. 1.零售业 传统零售业对于消费者来说最大的弊端在于信息的不对称性.在<无价>一书中,心理实验表明外行人员对于某个行业的产品定价是心里根本没有底的,只需要抛出锚定价格,消费者就会被乖乖的牵着鼻子走. 而C2C,B2C却完全打破这样的格局,将世界变平坦,将一件商品的真正定价变得透明.大大降低了消费者的信息获取成本.让每一个人都知道这件商

“大数据”是重塑招聘未来的首要趋势

为了规划未来,您需要深入了解同行的情况,做到知己知彼. 本报告的宗旨正是如此,我们希望能为您这样的招聘负责人解读中国及全球最重要的招聘指标及趋势.本报告基于中国 278 位企业招聘负责人对问卷的答复. 所有受访者的职位都是经理或以上级别. 人才招聘在高管工作中占有重要地位.招聘负责人认为自己的部门正在帮助塑造公司的未来. 在中国,超过 90% 的招聘负责人认为人才是公司的头等大事. 招聘团队的任务较去年轻松,且今年注重招聘质量.只有 50% 的招聘负责人表示他们团队的招聘数量将有所增加,这一数字