以图搜图更快准!浪潮GPU加速智能搜图计算

  在未来的某一天,当你突然想知道这个世界上有多少人跟你长的相似的时候,你可以在搜索框中上传一张自己的照片,剩下的一切都可以交给智能化的图片搜索引擎来完成,它能根据图片的内容特征自动识别相似的图片。这种“以图搜图”的情景说起来容易,但实现起来,却是一个困扰了谷歌、百度等各大搜索引擎巨头们许久的技术难题。

  要知道,计算机本身并不能识别图像或文字,唯有将其转化为数字,计算机才能识别和处理。传统的图像检索技术是以文本检索技术为核心构建的,互联网上的图片被人为的打上各种各样的标签,如一张海上日出的风景照片,可能的标签包括“海洋、日出、风景”等等,一旦有用户在搜索框中输入这些关键词后,搜索引擎会在数据库中自动查找相对应的标签。

  然而,随着技术的进步,以人工智能为核心的内容图像检索技术已经成为未来发展的趋势。目前,谷歌通过提供数百万份 YouTube 视频,成功的让虚拟神经网络系统——DistBelief在事先没有获取“猫的特征描述”信息的情况下,自行总结出猫这个概念的特征。也就是说,DistBelief具有自学习能力。而在这套人工智能系统后面,是一个由 1000 台机器组成、包括 16000 个内核、处理参数高达 10亿个的超级计算机系统。

  让机器像人一样理解图像内容,强大的硬件固然必不可少,可最核心的依然是智能算法的设计,目前基于聚类的方法是图像搜索领域的关键方法之一,其中k-means算法是应用最广泛的无监督聚类方法,海量数据的索引大部分都使用了分层聚类的思想。但是k-means算法效率相对比较低,原来CPU版本的方法在使用50到60个节点的条件下处理约100万张图片,需要耗时5个多小时。这种速度对于动辄上亿数据的互联网公司来说,完全无法接受的,因此必须要对k-means进行优化。

  针对k-means目前的特点,浪潮日前与国内某知名搜索公司实现合作,成功实现了对k-means算法的优化。在项目过程中,浪潮高性能计算并行团队在分析代码后,提出GPU集群的解决方案,并提出了从硬件(计算节点、网络互联、存储节点)到软件(优化软件)的一揽子解决方案。特别在软件方面,浪潮与客户算法专家团队共同成立专门联合项目组,基于K-means串行版本,完成GPU MPI集群版本的实现,节点内使用CPU+GPU协同计算,大幅降低了计算时间。

  双方联合针对GPU架构进行了算法层面的优化,重写了计算部分代码,将整体速度大幅提升。经过优化后的软件,在单GPU上运行的速度与串行程序相比,加速比达到41倍,1块GPU相当于4.4个8核CPU并行的性能,同时由于浪潮 GPU版本K-means具有很好的性能可扩展性,这使得GPU服务器具有很好的性价比非常适合于此类应用大规模部署。

  某搜索引擎技术部的负责人在上线了浪潮优化后的搜索程序表示:“浪潮优化以后,大幅降低了我们硬件采购的成本,并且节省了计算时间,为我们的应用上线带来了很大助益。”

  浪潮作为中国异构高性能计算技术的领先者,一直致力于推动GPU和MIC的应用发展和人才培养,推动异构技术的产业生态环境建设。据了解,浪潮已经分别与英特尔和英伟达联合成立并行计算实验室,合作开发优化基于MIC和GPU的并行应用,涉及石油天然气、数值气象预报、生命科学、计算流体力学、金融风险分析、电磁仿真、CAE、机器学习等诸多领域。同时,浪潮高性能计算应用软件开发团队是目前同时掌握CPU、GPU、MIC应用技术的国际领先团队,在CPU、GPU、MIC技术方面已取得多项研究成果,并成功在SC和IDF大会上成功展示。

网上商城商品/规格/促销价格(作者:李祥敬责任编辑:李祥敬)

时间: 2024-08-01 18:19:02

以图搜图更快准!浪潮GPU加速智能搜图计算的相关文章

利用 GPU 加速人工智能:新型计算模式

纽约大学本周有一场探讨 "人工智能的未来" 的年度座谈会,Yann LeCun 邀请NVIDIA 联合创始人兼首席执行官黄仁勋 (Jen-Hsun Huang)先生在座谈会上发言.这场完美的盛会聚集了人工智能领域中的诸多翘楚以探讨人工智能的发展现状以及不断取得的进展.以下为黄仁勋先生的发言主题,即为什么说深度学习是一种需要新型计算模式的全新软件模式:为什么人工智能研究人员采用 GPU 加速的计算模式:随着这种模式迅速流行,NVIDIA 为推动人工智能的进步正在开展哪些工作.以及为什么人

CNNdroid:在 Android 上利用 GPU 加速执行 CNN (卷积神经网络)

摘要 智能设备和可穿戴设备都将受益于深度学习算法(比如CNN)的准确性和可扩展性.然而,性能和能耗等现实的问题使得在移动端设备上这类密集计算的算法变得非常受限.我们开发了CNNdroid这个GPU加速库,可以在Android设备上实现CNN网络的训练.通过实验,CNNdroid在移动设备上实现了60倍速的提升,以及130倍速的节能.CNNdroid这个库已经开源在Github上,可以从Github项目页面下载. 关键词 Deep Learning, Deep Convolutional Neur

活用Windows 7搜索功能 更快更准更贴心

Windows 7(以下简称Win 7)推出之后,各项功能都受到了用户的好评.其中Win 7的搜索功能更是一个亮点,成为很多用户最常用的一个功能.相比Windows XP完全依靠电脑性能的即时搜索,Win 7的搜索原理已经和过去完全不同,性能也大幅提升.不过也许你还不知道,通过优化使用方法,我们可以让Win 7的搜索更快.更准! 最简单方法 缩小搜索范围 平时我们使用Win 7的搜索功能可能都是在Win 7的开始菜单当中直接进行的,不过这样的搜索是对所有的索引文件进行检索,而那些没有加入索引当中

更快更准更强 趋势科技云安全颠覆Web威胁防护史

云安全架构(全称为趋势科技云安全智能保护网络)由智能威胁收集系统.计算云.服务云和安全子系统4个部分构成.这四个系统协同工作,在反病毒效果上比传统对比技术的反病毒方案反响速度更快.辨别技术更准.防护能力更强. 按需索取 服务云响应更快 根据AV-Test.org的最新统计,全球恶意程序已超过1100万个,而且每4秒钟就产生一个新病毒.当前的病毒爆发速度是传统的安全方案难以应对的.尤其是依靠病毒特征码查杀动辄几个小时的响应速度,将用户"长时间"置于无防护状态已经让人不可接受.而云安全中的

QQ浏览器微信版打字更快 拖曳发图

  经过一个多月的预热体验,QQ浏览器7.6微信版在本周四正式发布.该版本新增微信聊天应用,提供了高效的微信沟通体验,尤其是为上班族带来更便捷的沟通方式,提升工作效率. QQ浏览器微信版保留了网页版微信通过二维码登录的方式,但是微信界面将不再占用单独的浏览器标签页,而是变成左侧的边栏.这样的方便用户浏览网页的同时,使用微信. 此外,对于图片.文字.链接,以及文档等资料的分享,也可以通过拖拽实现.并且,在该产品上的聊天内容还将同步到手机上,即使离开办公环境,用户也可以找到所需要的内容. QQ浏览器

痴迷更快更低更新 国产手机集体“迷失”

不客气地说,中国手机产业已进入一个怪圈:痴迷更高的配置.更低的价格,更快的换代速度.却遗忘了用户体验,遗忘了产品特色,遗忘了模式创新. 6月25日,华为高调发布了荣耀6手机.这款轰轰烈烈推出的产品,将卖点放在了所谓全球首个8核4G Cat6处理器以及"秒杀小米"的1999元低价上. 然而,消费者真的在意这两个卖点吗? 今年以来,共有不下15款新手机陆续亮相,包括IUNI.美图.vivo shot.锤子等等品牌纷纷粉墨登场,频次之高,史无前例.然而,这些新产品的雷同程度,也达到了令人发指

在Java中使用启发式搜索更快地解决问题

了解一个流行人工智能搜索算法的 Java 实现 通过搜寻可行解决方案空间来解决问题是人工智能中一项名为状态空间搜索 的基本技术. 启发式搜 索 是状态空间搜索的一种形式,利用有关一个问题的知识来更高效地查找解决方案.启发式搜索在各个 领域荣获众多殊荣.在本文中,我们将向您介绍启发式搜索领域,并展示如何利用 Java 编程语言实现 A*,即最广为使用的启发式搜索算法.启发式搜索算法对计算资源和内存提出了较高的要求.我们还将展 示如何避免昂贵的垃圾收集,以及如何利用一个替代的高性能 Java 集合框

Android QQ浏览器4.1评测:更快了,更快乐

&http://www.aliyun.com/zixun/aggregation/37954.html">nbsp;   自Android QQ浏览器4.0发布以来,"极速"一直是手机QQ浏览器的全新标签.近日,Android QQ浏览器4.1发布,这款搭载全新X5内核的手机浏览器仍然主打"快"的概念,并在产品功能介绍中 提出"2013, 更快了,更快乐!"的口号.     除了主打速度快外,QQ浏览器4.1还增加了&qu

与阿里云整个生态体系共同成长,更快更好的为房地产行业客户提供高价值的服务。

免费开通大数据服务:https://www.aliyun.com/product/odps "最早是新业务要做,但是买服务器来不及,管理员没到位,而且新业务的成本很高,是否能成功也是未知,因此明源决定采用阿里云,等资金和人到位再搬到自己内部.然而就是这种误打误撞,却让明源抓住了一个很好的机会走在了正确的轨道上."--副总裁童继龙 "阿里云数加的覆盖面很广,从存储.计算到上层应用,提供了一整套的解决方案,确实起到了马总说的普惠大数据.此外,数加也在不断的迭代,不停的有新产品出现