想真正理解深度学习?需要知道这三件事

对于喜欢数据的专业人士来说,潜水堪称完美运动,因为收集数据是潜水的重要组成部分。慢慢地下降到深海中,你可以想象自己首次浸入未被开发的数据湖中。在成千上万的水下生物中,你可以寻找最大的鱼、最艳丽的珊瑚,这就像在庞大的数据集中寻找隐藏的洞见。

但是深度并非只与深海潜水有关。作为重要的概念,它在分析和机器智能领域也变得越来越重要。人工神经网络,即模仿人类大脑建立的、处理单元(人工神经元)相互关联的计算机模型,已经出现数十年了。早期,这些神经网络通常有1个或2个隐藏神经元层组成,现在已经从浅层结构进化到深层结构,后者又被称为深度学习。这种转变依赖于大规模建造大型和并行模型的成本不断下降,以及训练深度模型所需大型多维数据集的日益增多。

但要想真正理解深度学习,你需要首先了解这三件事:

1.深度学习是机器学习分支

从本质上看,深度学习隶属于机器学习范畴。但是标准的机器学习通常需要手工从数据中提炼模式,耗时费力。而深度学习模型擅长于自动捕获隐藏于大数据中的复杂结构模式,在对图像、视频、音频以及文本数据进行分析时,这种能力拥有巨大优势,而依靠手工从数据中提取模式很快将达到极限。

2.深度学习不只是技术动力室

到目前为止,大量学术机构和科技公司都在研究深度学习,媒体对深度学习相关成果的报道也日益增多,这都大大促进了深度学习的普及。现在,越来越多的公司正进入这个领域参加探索。有许多报道称,数据科学家正将深度学习方法应用到更广泛的行业分析领域,比如客户流失预测、金融欺诈调查、产品推荐等,传统企业对深度学习的兴趣日益增加。

3.深度学习的利弊权衡

企业需要了解,进入深度分析领域需要权衡利弊。尽管深度网络构架的精度可媲美甚至超越现有分析方式,但由此产生的模型通常是不透明的“黑盒子”,需要对其进行精调。深度学习往往需要预先架构投资,以便能处理模型的复杂性。大型神经网络往往需要数小时乃至数天的训练,如果没有事先考虑或准备,这可能对数据科学团队造成巨大影响。

为分析挑战选择正确的模型不仅仅是最大化模型精度的问题,它还受限于输入数据集。当涉及到传统分析时,模型的可解释性和简单性往往比精度要求更高。而要处理大数据集,建模方法的性能和可扩展性都需要被考虑到。依赖非操作性模型协助发现洞见的要求,与全面可操作性的建模构架完全不同。

作者:小小

来源:51CTO

时间: 2024-09-30 15:36:27

想真正理解深度学习?需要知道这三件事的相关文章

【深度学习笔记】(三)Tensorflow on Android

[深度学习笔记](三)Tensorflow on Android 一.准备好Android Studio及预先训练好的模型pb文件 二.新建Android项目A并将pb模型放到assets文件夹 三.添加libandroid_tensorflow_inference_java.jar到项目A的libs文件夹.添加libtensorflow_inference.so到项目A的libs\armeabi文件夹 四.加载libandroid_tensorflow_inference_java库,通过Te

盖茨:向巴菲特学习三件事

盖茨(左)与巴菲特 6月17日消息,不论你多富有或者多成功,都有学习和进步的空间,比尔-盖茨证明了这点.最近,盖茨在LinkedIn上刊文,称自己从巴菲特身上学到了三件事. 下面就是盖茨刊发的文章: 上个月,我去奥玛哈(Omaha)参加伯克希尔·哈撒韦公司年度股东大会.当中乐趣多多,不只是因为有乒乓球比赛和报纸投掷比赛,还因为我可以向巴菲特学习,知道他是如何思考的. 下面是我过去几年从巴菲特身上学到的三件事: 1.不只是投资 人们从巴菲特身上学到的第一件事是如何投资,考虑到他卓越的投资战绩,这也

网站想要盈利只要做好三件事

中介交易 SEO诊断 淘宝客 云主机 技术大厅 网站的运营和盈利说复杂也复杂,说简单也简单. 往复杂了说,要考虑网站建设,库存,进货,防诈骗,客户服务,售后服务,运货,发货,人员管理,当然还有网站本身的推广等等. 有一种说法,读书有两个方向,要把书越读越厚,还要再把书越读越薄.很多时候,在了解了各个方面以后,高度概括能更清楚的认清事物的实质. 我觉得从总体上来说,网站要想盈利只要做好三件事.一,有好的产品.二,有流量.三,能卖东西的网站. 好的产品 这是一切的基础.虽然网站上卖东西一般并不与客户

柳传志:创业前要想清楚三件事

柳传志:创业前要想清楚三件事 ■ 人物点击 日前,在成都举办的"天府创业论坛"上,联想控股董事局主席柳传志在与现场创业者沟通时表示,创业之前要想清楚三件事:1.所做的事能不能赚到钱,能赚多少钱.什么时候赚钱:2.行业门槛有多高,进入门槛是什么,自身的水平能否达到行业标准:3.考虑清楚竞争对手的状况,因为竞争关乎生存. 他指出,很多科研工作者带着技术成果出来创业,但对这个成果到底能不能赚钱,怎么转化成钱,没想明白."企业到底用什么样的盈利模式,怎么能赚钱这个事是第一要想的.&q

柳传志:创业之前要想清楚三件事

柳传志 日前,联想控股董事局主席柳传志在天府创业论坛上与与会者沟通时表示,创业之前要想清楚三件事:能否赚钱.行业门槛及竞争状况. 柳传志认为,创业者在创业之前要"尽量"想清楚,如果预先不去重视的话,上来就创业,是很容易牺牲的. 他建议创业者要想清楚三件事情:1.所做的事能不能赚到钱,能赚多少钱.什么时候赚钱:2.行业门槛有多高,进入门槛是什么,自身的水平能否达到行业标准:3.考虑清楚竞争对手的状况,因为竞争关乎生存. 他同时指出,创业者能否进入赚钱的领域以及如何面对与别人的竞争也很重要

如何理解深度学习分布式训练中的large batch size与learning rate的关系?

问题详情: 在深度学习进行分布式训练时,常常采用同步数据并行的方式,也就是采用大的batch size进行训练,但large batch一般较于小的baseline的batch size性能更差,请问如何理解调试learning rate能使large batch达到small batch同样的收敛精度和速度? 回答: 最近在进行多GPU分布式训练时,也遇到了large batch与learning rate的理解调试问题,相比baseline的batch size,多机同步并行(之前有答案是介

理解深度学习的局限性

人工智能空前火热.许多公司已经用IBM Watson系统取代了工人:人工智能算法甚至能比医生更准确地诊断病人.新的人工智能创业公司如雨后春笋,宣称可以使用机器学习来解决你所有个人问题和商业问题.  许多平时看似普通的物品,像是果汁机.Wi-Fi路由器,做广告时都说自己由人工智能驱动.又比如智慧书桌,不仅能记住你不同时段所需要的高度设置,还能帮你叫外卖. 许多喧嚣人工智能的报道其实是由那些从没亲手训练实现过一个神经网络的记者,或是那些还没解决任何实际商业问题却想招募天才工程师的初创公司写的.怪不得

中国人工智能学会通讯——深度学习的迁移模型 三、三种不同的迁移方法

三.三种不同的迁移方法 将这些概念加起来,就可以总结出三个不同的迁移方法 1.基于差异的方法 在哪里做迁移的转换.自适应.可以在某个层次来做,也可以在多个层次来做,如何来衡量两个领域之间的距离,可以用先验的这种概率.模型,也可以用联合概率.模型:另外还可以将源领域的信息加进来,建立一个更准确的Loss.这都是图像领域获得的知识,那自然语言会不会有类似的方式? 下面一篇描述NLP的文章也证明了这一点,假设我们把自然语言的深度处理分成三个层次,即E.H.O,如果我们锁定不变,而其他的层次有可能变化,

运用深度学习教机器人理解自然语言

雷锋网按:本文作者Jonathan是21CT的首席科学家.他主要研究机器学习和人工智能如何使用在文本和知识中让计算机变得更智能.他在德克萨斯农工大学获得心理学学士学位和工商管理硕士,在德克萨斯大学获得计算机博士学位.译者/赵屹华 审校/刘帝伟.朱正贵 责编/周建丁. 在深度学习出现之前,文字所包含的意思是通过人为设计的符号和结构传达给计算机的.本文讨论了深度学习如何用向量来表示语义,如何更灵活地表示向量,如何用向量编码的语义去完成翻译,以及有待改进的地方. 在深度学习出现之前,我们书写的文字所包