如何利用软硬深度结合优化云硬件

本文PPT来自阿里巴巴基础架构事业群架构师希有于10月16日在2016年杭州云栖大会上发表的《软硬深度结合的云硬件优化实践》。

随着金融、物流、电商、云计算和媒体这五大平台的迅猛发展,全业务在大规模、高效率、质量、软硬结合和技术驱动这五个方面对基础设施提出了挑战。其中在云计算和大数据环境下如何实现软硬结合引发了众多工程师们的思考和实践。

软硬结合实践主要涉及定制处理器、定制SSD、高密度存储和服务器四个方面。在定制处理器方面,由于受到了来自X86计算领域的挑战,包括摩尔定律和日趋同质化官版处理器,我们在实践中采用了高频高核心的Alicpu Xeon E5 v4,并且同步Intel的官方发布将其大规模投入使用。为评估性能,我们结合阿里业务多样性的综合性能评估体系创新定义了一些评价指标,进而搭建了Alibench,通过测试,我们发现这种策略使得Performance/Watt得到了较大的提高。在定制SSD方面,我们使用了阿里自研的固态盘,这样不仅使我们自主掌握了核心技术和设计,而且还将软硬件打通,提升了应用表现。在高密度存储方面,我们深度结合云存储场景,采取高度化+模块化+一体式Alirack的方式,并且未来我们在高性能fabric和资源池化等方向将不断探索。在最重要的服务器方面我们采用了定制的Aliserver,通过采取Purley+惠普场景深度定制+CRB共建模式,实现了自主可控,并且在规格竞争力领先业界。

展望未来,便捷高效的基础设施服务化是重点方向,其中主要涉及计算存储分离架构、计算众核化Soc化和异构化等等。随着云计算竞争日益激烈,云计算将对全链路整体把控综合竞争力提出更高的要求,如何利用软硬结合来优化云硬件还有更多的路要走。

时间: 2024-11-10 00:44:23

如何利用软硬深度结合优化云硬件的相关文章

利用深度学习优化视频结构 助力城市安防

深度学习是机器学习中一种基于对数据进行表征学习的方法.观测值(例如一幅图像)可以使用多种方式来表示,如每个像素强度值的向量,或者更抽象地表示成一系列边.特定形状的区域等.而使用某些特定的表示方法更容易从实例中学习任务(例如,人脸识别或面部表情识别).深度学习的好处是用非监督式或半监督式的特征学习和分层特征提取高效算法来替代手工获取特征. 深度学习是机器学习研究中的一个新的领域,其动机在于建立.模拟人脑进行分析学习的神经网络,它模仿人脑的机制来解释数据,例如图像,声音和文本. 视频结构化助力智慧城

大规模深度学习优化技术在PAI平台中的应用及实践

1. 前言 自2012年Deep Learning的代表模型AlexNet在ImageNet大赛中力压亚军,以超过10个百分点的绝对优势夺得头筹之后,依托于建模技术的进步.硬件计算能力的提升.优化技术的进步以及海量数据的累积,Deep Learning在语音.图像以及文本等多个领域不断推进,相较于传统作法取得了显著的效果提升.   工业界和学术界也先后推出了用于Deep Learning建模用途的开源工具和框架,包括Caffe.Theano.Torch.MXNet.TensorFlow.Chai

甲骨文向中国客户正式发布全新优化云平台:Oracle Solaris 11.2

甲骨文公司今日在北京面向中国客户正式发布其全新优化云平台:Oracle Solaris 11.2.作为企业级操作系统和其他组件的强大产品组合,该新版本为云计算提供了高效.符合法规遵从.安全.开放和可支付的软件平台.甲骨文系统事业部执行副总裁John Fowler出席了此次发布会,并针对中国用户需求和发展特点,分享了甲骨文在云基础架构上的持续投入以及致力于打造现代云平台的核心理念. Oracle Solaris 11.2是一个融合了高效虚拟化.应用驱动软件定义网络(SDN)技术以及全面OpenSt

国家开放大学利用云计算技术搭建远程教育云平台

11月16日,国家开放大学远程教育云服务平台架构研究课题专家研讨会在京召开.中央电大校长杨志坚,课题组全体成员,中央电大相关部门负责人,来自天津等5所省级电大主管信息化的校领导及相关技术专家参加会议. 据悉,针对国家开放大学重点建设内容,中央电大将"国家开放大学远程教育云服务平台架构"立项为重点课题.目前,该课题已完成前期需求调研.文献研究并初步确定技术架构,但仍需围绕需求分析.云计算技术与教育教学深度融合等进一步开展深入研讨. 杨志坚指出,为整合所有可利用的教育教学资源,消除信息孤岛

利用nc 直观理解阿里云OSS 存储服务

1.本文要说什么 利用nc 直接与阿里云OSS服务器建立TCP 连接,通过输入HTTP 请求头部及数据与OSS进行交互,以此理解阿里云OSS服务的本质及使用阿里云OSS过程中的一些trouble shooting. 2.相关准备工作 一台连上互联网的Linux主机(如果没有可以购买一台阿里云ECS),注册并开通阿里云OSS服务(oss.aliyun.com)并创建一个bucket,本文以青岛的bucket:bucket-example(bucket-example.oss-cn-qingdao.

《程序设计解题策略》——1.4 利用改进型的二叉查找树优化动态集合的操作

1.4 利用改进型的二叉查找树优化动态集合的操作 我们知道,二叉查找树(binary search tree)能够支持多种动态集合操作,因此在程序设计竞赛中,二叉查找树起着非常重要的作用,它可以用来表示有序集合.建立索引或优先队列等.作用于二叉查找树上的基本操作时间是与树的高度成正比的:对于一棵含n个节点的二叉查找树,如果呈完全二叉树结构,则这些操作的最坏情况运行时间为O(log2n):但如果呈线性链结构,则这些操作的最坏情况运行时间退化为O(n).针对二叉查找树这种不平衡.不稳定的弊病,人们做

如何利用问答平台来优化网站

摘要: 问答平台一直是seoer青睐的外链平台,其权重高.收录好已经成为公认的优势之处,但是近段时间以来,问答平台的外链已经越来越难做了,但是这么好的一个外链平台,相信seoer还是舍 问答平台一直是seoer青睐的外链平台,其权重高.收录好已经成为公认的优势之处,但是近段时间以来,问答平台的外链已经越来越难做了,但是这么好的一个外链平台,相信seoer还是舍不得放弃的,笔者也是如此,因此也一直在研究如何利用问答平台来优化网站. 经过一段时间的实践和参考别人的资料,笔者对问答平台如何做外链也有一

IBM发布《利用业务分析与优化实现突破》白皮书

1月26日, IBM公司发布主题为<利用业务分析与优化实现突破--新锐洞察确保企业良好运营>的白皮书.白皮书通过对比业绩最佳企业与业绩欠佳企业在企业信息管理.数据治理.业务分析成熟度等各个维度的表现,揭示出在现行经济周期中,基于信息做出决策对企业制定成功的业务战略至关重要. 该白皮书的三大重要发现是:具备突破能力的企业的三大共同特征--挑战.预测和授权:数据治理的实现将是业务分析与优化的重要基础:尽管目前经济前景仍然混沌不明,但企业已将重点从消除成本调整为增加总体收入,因此影响总体收入的分析活

Cloudyn推出新服务 帮助AWS用户监控并优化云消费

新推出的服务旨在帮助云用户节约成本,并将支持Rackspace. Cloudyn将于周一推出新的代理服务,旨在帮助企业监控云计算的使用情况,并推荐云计算的优化方案以节约成本. 新服务最初面向Amazon Web Services的用户,并计划于第二季度向起支持Rackspace,以后将陆续支持更多服务商.该服务在5月1日前免费,在此之后用户需要为推荐的优化方案付费. 企业可以通过AWS账号登陆Cloudyn来开启服务.Cloudyn自动检测企业在AWS上所使用的数据库.服务器以及存储器,并检测C