人工智能时代 云和大数据到底有多重要?

60年前的某个夏天,麦卡锡、明斯基等年轻的科学家们举办了一次聚会,共同研究用机器模拟智能的问题,也是在那时,“人工智能(AI)”的理念正式被提出。如今,人工智能已经应用于语音识别、图像处理器、计算机视觉、机器人等多个领域,甚至击败了围棋九段李世石,这种进步是难以置信的。而这一系列成绩的背后,是海量数据的积累与学习,在没有云的时代,是无法想象的。

  人工智能时代 云和大数据到底有多重要?(图片来自The Huffington Post)

人工智能涉及的领域非常广泛,工业、航天、商业都有应用,并且已经深入人们的生活,打开手机中的Cortana或者Siri,这就是AI的产物。要知道,在几十年前,这种超前的技术是不受认可的,教授相关课程的学校也是寥寥无几。究其原因,主要就是数据的积累和应用。高容量存储设备丰富了数据量的留存,随着数据的不断增加,人们开始在其中发现某种规律,引发了分析的需求。

分析让大量的数据有了价值,机器开始懂得用户想要什么,可以预测未来的天气和球赛的比分,这种人工智能与场景的结合,要实现的就是改变生活方式和解放生产力。具体来说,很多过去只有人能做的事情,现在更多的情况下能够通过机器实现,典型的例子包括语音助手、无人驾驶汽车。更重要的是,当硬件性能逐渐提升、计算资源越来越强大时,成本却越来越低廉。

微软全球执行副总裁陆奇曾指出,如果大数据被充分利用,全球企业将额外获得1.6万亿美元的数字红利。当然,前提是要对海量信息进行分析,无论是深度学习还是神经网络,最终都要转换为产品或服务惠及用户。数字经济、分享经济、工业4.0...背后都少不了大数据和云计算的支持。

不过,要想在人工智能时代分一杯羹,绝非易事。AI的基础是大数据,这些资源通常掌握在巨头手中,这也是为什么你会看到,这个领域的头条总是被微软、谷歌、IBM、苹果、亚马逊、Facebook这些公司抢去。在国内,BAT、京东这样的企业同样拥有足够的用户基础,并且已经开展了应用。

在今年的中国大数据产业峰会上,腾讯公司董事会主席兼CEO马化腾主要就讲了一件事:大数据。通过18年的运营,腾讯数据中心的存储总量超过1000个PB。日常使用方面,用户每天在微信朋友圈和QQ空间上传的图片达到10亿张,腾讯视频(含微信公众号H5视频)每天播放量达20亿次,除夕当天红包支付超过25亿笔,每天移动支付超过5亿笔。围绕这么多的数据资源,腾讯也开发了一系列技术和功能。

在人工智能领域 腾讯做了哪些事?

海量数据时代,搜索的重要性可想而知。基于在搜索领域多年的技术积累,腾讯云搜TCS通过对腾讯微信、QQ等各大垂直业务搜索需求进行高度抽象,把搜索引擎组件化、平台化、服务化,为移动应用开发者和网站站长提供了一站式搜索服务。云搜TCS支持分词和建立索引功能,搜索封装和技术门槛较低,具有可视化的数据预处理和离线排序定制能力,允许用户自主配置,检索耗时毫秒计算。

  腾讯云搜TCS

此外,腾讯云搜还建立了自然语言处理技术团队,整合“文智”NLP开放平台,提供中文分词、智能纠错、同义词识别、意图识别等能力。针对准确性,该服务还支持高级纠错、按域检索、分词定制、智能联想词等功能。开发方面,开发者可以对搜索结果的排序自主灵活控制,云搜还具有文档求交、相关性排序、排序表达式等策略。

搜索到的数据怎么使用,能否安全可靠,所提供的数据服务是否有针对性,是用户关心的问题。为此,腾讯大数据处理套件TBDS提供一键式部署能力,降低了大数据系统部署运维门槛,统一的控制台可以对集群进行配置、启停,通过DashBoard集中监控各组件实时运行指标,还支持多种数据接入以及输出方式,提供统一的数据源以及元数据的管理。

值得一提的是,腾讯还借助QQ、微信等产品建立了10亿级别覆盖度的基础库,对范围内的人群进行统计和分析,能够实现动态跟踪区域内人群流动、评估人流拥挤等级、捕捉开放社交网络的情况、分析目标客户群轨迹,让客户更精准的定位目标人群。这么多的隐私信息,泄露了怎么办?我们了解到,所有通信及数据存放都建立在腾讯云合规独立的机房,以保障用户数据资产安全。

  区域人流检测

机器学习是人工智能的核心要素,主要就是研究计算机如何模拟或实现人类的学习行为,以获取新的知识或技能。应用过程中,并行计算可以利用多个处理器解决一个大问题,提升了计算效率,这也是腾讯机智机器学习TML正在做的,其是简化用户对算法的接口调用、可视化、参数调优等自动化任务管理的开放平台。

  卷积神经网络实例,卷积层→子抽样层→卷积层→子抽样层之后→全连接后输出

该平台搭载了万兆网卡的大量CPU实体机,集成分类、聚类、搜索/排序、推荐等机器学习和深度学习领域的算法,针对在性能、效果等方面的特殊需求,可以一对一深度定制。功能方面,机智机器学习TML支持LDA(非监督机器学习)技术,可以用来识别大规模文档集或语料库中潜藏的主题信息。通过训练,能够把对文本内容的处理简化为K维向量空间中的向量运算,而向量空间上的相似度可以用来表示文本语义上的相似度。此外,CNN(卷积神经网络)能用来解决图像高层特征提取、分类、识别等计算机视觉难题,LR(逻辑回归)则具有易训练、易并行、泛化能力强等特性,适用于高维度海量数据的二分类任务。

  子抽样层(左图为全连接,右图为局部连接)

每一项技术的最终目标都是惠及大众,人工智能也是如此。要说AI领域最接地气的应用,应该就是图像和语音识别了。先说语音,国内厂商已经可以保证稳定性和准确率,以腾讯为例,通用领域的识别率能达到93.8%,可以做到情绪识别、区分说话人、云存储弹性扩容等功能。不过,要想进入更深层次的语音识别,还要有对情境的理解,这方面有很大的努力空间。至于图像,人脸识别算是最常用的技术之一,腾讯提供了“人脸检测与分析”、“人脸比对”、“人脸验证”、“人脸识别”等一整套技术方案。其中,人脸检测技术准确率和召回率分别超过99%和95%,人脸验证技术准确率为99.65%。

  用户洞察分析产品结构

云和大数据指引人工智能改变未来

无论是搜索、智能识别,还是机器学习,BAT在人工智能领域的覆盖面已经很广,背后的技术实力也与谷歌、微软等逐渐缩小。在数据规模上,国内企业的资源并不输海外,需要加强的就是如何更有效地利用这些数据,从而改善人们的生活。

得益于大数据和云计算的支持,互联网正在向物联网扩展,人工智能则是升级体验、解放生产力的重要手段。迈克尔·戴尔称,今天的处理能力、带宽、存储正以每年10倍的速度成倍增长,未来15年的技术将比现在强大1000倍。

如今,大数据影响着各个行业,创造了巨大的商业价值。通过结合大数据和云计算,人工智能将更好地服务于人们的生活,推动时代进步。这一发展过程中,巨头企业已经开始利用数据规模和技术优势深耕布局,腾讯就是其中之一。

本文转自d1net(转载)

时间: 2024-09-17 05:55:06

人工智能时代 云和大数据到底有多重要?的相关文章

品高公开课 | 云和大数据时代的数据管理

小编的话 "技术干货"系列文章意在分享技术牛人的知识干货,每期主题都不一样哟!期待各位读者在文后发表留言,来一场技术上的交流和思想上的碰撞!本期将由品高大数据平台产品经理李伟文带来"云和大数据时代的数据管理"的分享. 分享嘉宾 李伟文,目前就任品高大数据平台--BingoInsightDIG平台的产品经理,专注于大数据和数据分析领域,拥有多个数据分析领域项目经验,14年开始转向数据平台方向的研究,主要负责产品规划.设计和售前支持. 分享正文 大家好,非常荣幸能和大家

张亚勤:云和大数据有望催生颠覆式创新

微软全球资深副总裁,微软(中国)有限公司董事长张亚勤20日发表博文"云和大数据有望催生颠覆式创新",文章提出,云计算和大数据的结合,将对今后的政治.经济.科技.民生产生难于估量的影响.无论是做硬件.做平台,还是做应用.做服务,归根结底都是以数据为核心.以数据为动力,来提升产品对用户的引力.强化企业竞争力.创造新的商业机遇.全文如下: 2008年9月-2009年7月,我曾利用业余时间,将自己对云计算的现实与未来的思考总结写成了<云计算三部曲>.那时,云计算对许多人来说还是新鲜

详细解读云计算时代的大数据

在面对着急速增长到高达PB级的海量业务数据时,人们脑海中自然而然出现了许许多多的疑问,大数据能对我的业务提供怎么样的帮助?云和大数据之间究竟存在着怎样的联系?云能否落地?Hadoop到底能不能当成是大数据的万能药?虚拟化将在大数据之中扮演一个什么样的角色?抱着这么多的疑问,今天我们就来走近大数据. 根据IDC的一份名为"数字宇宙"的报告,预计到2020年全球数据使用量将会达到35.2ZB.在如此海量的数据面前,处理数据的效率就是企业的生命. 大数据的来源 海量数据到大数据的发展过程是一

阿里集团刘冰:未来的时代是大数据时代

文章讲的是阿里集团刘冰:未来的时代是大数据时代, 7月23日上午消息,2015中国互联网大会之国际互联网高峰论坛在北京国际会议中心举行.阿里巴巴集团副总裁刘冰在现场做了主题的演讲. 刘冰表示,未来的时代是大数据时代,大数据就像魔方一样吸引着人类,相信在未来.在中国会产生100个.1000个.甚至10000个超越阿里巴巴的公司. 在其看来,现在我们生活在一个非常好的时代,互联网是基础设施,大数据是战略资源,云计算是核心竞争力. 以下是刘冰演讲全文: 尊敬的卢秘书长,尊敬的各位来宾.各位朋友,大家上

大数据到底能干嘛?小数据你造吗?

互联网思维.大数据无疑是现在互联网圈里最火,也是最能招人眼球的2个词语,但是,什么是互联网思维,什么是大数据,各家也有各家的看法,怎样能更好的利用大数据更是人们热议的话题,哪大数据到底是什么呢?有幸听到了中国著名的网络数据分析的专家,宋星老师 的演讲说道了大数据的未来! 一.大数据的形成 互联网精神是什么,是开放.创新!互联网精神促使了互联网的快速发展壮大,随之而来的就是互联网信息数据的大爆炸,使得信息离散程度扩大!未来大数据的发展方向:去技术化,就是通过技术手段让使用大数据的人感觉不到大数据的

大数据到底怎么影响我们的生活

信息大爆炸的今天,不讨论大数据这个话题似乎就是跟不上时代.从医药到教育,再到其他各个领域,大数据充斥着现代社会的每个角落.而我们最关心的还是大数据最终将以什么样的形式,怎么样影响甚至改变我们的生活.来听听四位专家告诉你大数据到底有多少可能. 丹·瓦格纳 Dan Wagner Civis Analytics 的创始人兼首席执行官 你曾经说过,希望用大数据解决全球最大的问题.你最想解决的问题是什么? 我们主要关注两个领域:教育和健康.在教育领域,我们专注于利用个人层面的数据,帮助客户发现那些申请和注

当人工智能遇上大数据 第九届中国云计算大会——大数据与人工智能应用论坛吸睛亮点集结

至顶网个人商用频道 06月10日 北京消息(文/黄雅琦)科技正在进入一个新的时代,这个时代的一个典型特征就是数据成为一种宝贵的资产.在海量的数据支撑之下科技越来越智能,不仅能"听懂"我们的语言,还能"看懂"我们的表情,帮我们做出更为科学的决策.在这些科技进步的背后离不开数据处理技术的飞速发展,从商业智能.大数据到人工智能,人类对数据的处理能力不断提升,数据背后的商业价值在不断发掘,也给人类更大的帮助. 基于这样背景,第九届中国云计算大会将在6月14日-16日在北京国

对话美国科学家,大数据到底怎么影响我们的生活?

大信息大爆炸的今天,不讨论大数据这个话题似乎就是跟不上时代.从医药到教育,再到其他各个领域,大数据充斥着现代社会的每个角落.而我们最关心的还是大数据最终将以什么样的形式,怎么样影响甚至改变我们的生活.来听听四位专家告诉你大数据到底有多少可能. 丹·瓦格纳 Dan Wagner Civis Analytics 的创始人兼首席执行官 你曾经说过,希望用大数据解决全球最大的问题.你最想解决的问题是什么? Dan Wagner:我们主要关注两个领域:教育和健康.在教育领域,我们专注于利用个人层面的数据,

2016年大数据到底还算不算个 “东西” (附2016 大数据版图)

原文编者注:原文是 FirstMark Capital 的 Matt Turck 的文章.本文全面总结了大数据领域的发展态势,分析认为尽管大数据作为一个术语似乎已经过气,但是大数据分析与应用才刚刚开始兴起,在与 AI.人工智能等新兴技术的结合下,大数据的机会也许要比大家想象的还要大. 在喜新厌旧的技术初创企业界,已有 3年 历史 "大数据" 听起来似乎已经过气了.虽然 Hadoop 在 2006年 已经出来,但 "大数据" 这个概念大概是在 2011 到 2014年