破译混合云架构的关键点:云数据传输

混合云架构融合了私有云和公有云,如何部署混合云已经成为IT圈里面最热门的话题之一。大部分数据中心团队都发现这种架构在技术上具有极大的挑战,这些挑战主要源于各种工具的不成熟和云产品的快速发展。

出于各种原因,IT团队需要将云资源同时分配在私有云和公有云上,从而产生了混合云。其中首要原因是云爆发。云爆发指应用运行在私有云或数据中心中,当私有云计算能力达到顶峰时按需加入公有云资源。除此之外还有经济原因,公有云能降低资源开销,同时也能降低维护成本。

解决峰值业务的访问

对企业来说,在公有云服务提供商(如亚马逊云服务Amazon Web Service)上创建额外的公有云资源是非常有吸引力的,因为企业数据中心只需要部署支持平均负载的私有云资源,而不需要为了应付峰值负载而过度部署。业务的峰值负载往往超过均值负载的20%-50%,甚至更多,因此利用公有云可以极大程度上避免低利用率的资源开销,特别是对于峰值发生较少的情况。

企业乐于节约开销,并且倾向于具有高度灵活性的公有云资源——大量低成本资源能够秒级启动秒级终止,这一细节至关重要。

随着数据量逐日增加,企业业务对数据已经产生极大的依赖性。迁移TB级别的数据需要很长时间,尤其是当即启即用的公有云计算实例需要访问私有云上的大批数据时,我们遇到过很多麻烦。

云数据传输慢的主要原因在于网络带宽。我们目前没有足够的带宽支持快速的云数据传输。这个限制使我们在需要云爆发(负载超过私有云极限)时不能及时将数据拷贝到用于扩展的云资源上,成为混合云使用的一大难点。

对于上述问题,目前最热门的混合云部署实例是数据波动(data volatility)。这种场景中,我们首先决定是否需要分别在公有云和私有云中部署多份同样的数据。如果需要的话,如何保持多份数据的一致性,是一个非常困难的挑战。因为任何传统的数据锁操作,在远程执行时,都会使数据访问变得非常慢。

如何解决访问慢的问题?如果数据库中大部分数据都是固定不变的,比如历史数据,剩下的小部分数据是会缓慢变化的,比如价格列表、描述信息等,那么IT团队仅仅需要在访问一致性数据时才进行同时访问多个数据库的慢操作,例如查询资产可用情况。对于不需要保持一致性的数据,IT团队可以异步访问,或者访问本地数据库副本。这种优化访问需要根据业务特点设计数据存取的方式,它的好处是毋庸置疑的,因为访问本地数据库副本的WAN传输速度肯定比访问异地数据库的运营商网络快。

还有另一种可以参考的混合云部署方法:将数据以主机托管模式(colocate)部署到电信服务提供商的机房,或者其他拥有快速连接公有云网络的设施中。这种部署方式使数据离公有云更近,公有云可通过10GbE或40GbE局域网快速访问数据,但私有云端访问数据速度将受制于较慢的WAN连接。

数据安全问题

将私有云的部分或者全部都迁移到拥有良好网络的主机托管环境中,能极大地解决混合云架构的性能问题。为了实现这种迁移,首先需要保证数据安全性。问题主要出现在加密方面,因为需要对传输和静态存储中的所有数据加密。

如果没有硬件加速,加密会极大地影响性能从而使我们不能经常使用。有一种方式对性能影响不大,就是通过磁盘加密技术实现静态存储数据加密,因为它只在存储端执行。虽然该方式下数据写盘不产生额外的时延,但该方式已被证明是不安全的,因此不推荐使用。在主机托管模式中,服务器端加密是非常必要的。

在主机托管模式中,你还将面对私有云和公有云之间交互的瓶颈问题,特别是在数据更新方面。由于数据锁操作和两地传输,很容易积累起百毫秒级别的时延。一种解决方案是将私有云的一部分资源(不单单是数据)部署到主机托管环境中,可以是由云服务商提供并维护这些资源,也可以直接购买服务商提供的服务器。

各大数据库提供商不断在数据安全方面重点投资,主机托管模式已经成为一种安全的部署方式。随着目前云服务价格战的继续,这种方式将会成为最经济的解决方案。

本文转自d1net(转载)

时间: 2024-10-28 09:02:26

破译混合云架构的关键点:云数据传输的相关文章

企业云架构,让云管理触手可及

中介交易 SEO诊断 淘宝客 云主机 技术大厅 2014全球云计算中国站已于16日在上海国际会议中心拉开帷幕. 本届全球云计算大会云集了全球范围的行业顶尖人士,其中有在业界堪称领军人物的 <云经济学>作者JosephWeinman,他被TechTarge(IT领域企业级高端市场)称为"十大云计算领袖"之一;国内最早提出云计算雏形.并将该技术运用到企业的现在,"有孚网络"首席执行官的安柯先生. 本次大会安柯先生将发表主题演讲:"企业云架构,让云管

张磊:混合云架构背景下阿里云的机遇与挑战

摘要:阿里巴巴云储备部门的张磊在2017年12月7日苏州云栖大会上介绍了在混合云架构下阿里云在企业存储与灾备领域的现有优势与未来挑战.针对当前企业面临的存储计算问题,阿里云的高质混合云可以有效的解决. 以下是精彩内容整理:社会各个企业的存储与灾备以往都是用私有云进行,而随着社会的发展与进步,私有云在企业存储与灾备领域的功能越来越不能满足各公司的需求.公有云与私有云相结合的混合云架构将逐渐取代私有云模式,而阿里云作为公有云中的佼佼者,将继续致力于为各公司带来更多的便利,努力完善自身. 阿里云需要利

云架构和openstack的思考

作者:罗立树 最近在负责公司内部私有云的建设,一直在思考怎么搞云计算,怎么才能够把云架构设计得好一些. 本文章主要内容: 1. 行业生态 2. 从需求角度看云 3. 云计算概述 4. 云建设的关键问题 5. 私有云架构规划 一.行业生态 计算机云经过多年的发展,由一开始的概念,慢慢发展成熟并能够推向市场,提供多种多样的服务,市场空间非常之大. 在云的发展过程中,亚马逊经过多年的深耕积累,发展成为了云行业的标杆企业,甚至是建立了云解决方案的标准. 只要是存在商业价值以及商业利益的存在,就会有更多的

云架构中数据冗余度问题研究

1 引言 随着科学技术的进步,IT行业所在的环境复杂性与日俱增,更多的http://www.aliyun.com/zixun/aggregation/13546.html">IT预算被用于维护基础架构和维持应用程序的正常运行,而不是更好地满足客户的需要.云的出现似乎给人们带来了新的希望,于是有人做出这样的预测--未来云时代. 2 云架构体系设计 2.1 云架构的概念及特点 云架构这一概念是Google在2006年首次提出的,它是为满足按需分配的服务而设计的软件架构.云架构与我们所熟悉的传统

企业混合云架构设计

上篇提到,如果企业本身已经有大量的传统IT硬件设施,短期把所有业务放到公共云计算不太现实,这需要一个长期的过渡验证阶段.对于传统企业上云,节奏上我们通常建议先将非核心系统上云,积累云上的经验,逐步过渡到核心系统的上云. 混合云架构无疑是上云过渡阶段的最佳选择,企业继续使用自有数据中心,同时把公共云计算当做自有机房的延伸,做为企业新增的自有虚拟数据中心,根据需要随时在公共云(虚拟数据中心)上开通或是释放资源,尤其是新业务可直接部署到公共云上,也可以将公共云做为自有数据中心的一个灾备机房. 那么问题

南航卢春:混合云架构实践与未来技术规划

11月22日广州云栖大会上,中国南方航空公司电子商务部副总经理卢春带来了南航上云的实践思考.在他看来:"云+端"的服务模式为航企创新提供有利条件,利用云计算对海量数据的分析和处理,挖掘旅客群体的个性化需求,并据此开展精准营销.提高服务水平,正成为航企实现"换道超车"的关键.   以下是精彩内容整理: 南航是业内创新先驱,作为首个实现全流程电子化的航空公司,南方航空率先与阿里云合作,利用云计算重构信息化系统,并将网上销售系统的部分应用搬到云上,用云的方法解决海量和高并

混合云架构的私有云端规划技巧

将内部服务器与一个或多个混合云融合在一起充满挑战,简单地增加一段代码无法将虚拟服务器与公有云对接起来,还涉及到潜在的数据迁移.安全问题以及建立应用与混合云架构映射等问题. 确定应用需求 对很多企业来说,应用映射是个很不错的起点.你究竟想在云中放什么,哪些必须保留在内部?研究结果可能会令你感到吃惊,大量数据都是开放的,所有Web页面以及公司公共站点上的大多数数据都可以放在公有云上.有需求时能够进行扩展以应对日常的负载模式. 到目前为止,混合云结构最有趣以及最为重要的部分是应用能够跨越混合-公有边界

人民在线,混合云架构下的业务进阶之路

本文讲的是人民在线,混合云架构下的业务进阶之路 一. 项目背景 作为人民网控股的公司,北京人民在线网络有限公司与人民网舆情监测室一个机构.两块牌子,是国内最早从事网络舆情与新媒体生态研究的专业机构之一,在大数据时代的舆情监测.管理.应对以及人才培养等方面都处于国内领先地位,有很高的社会知名度.影响力和美誉度. 随着移动互联网快速增长,人民在线的舆情监测业务呈快速上升.蓬勃发展趋势.截止2015年底,在线运营的各类舆情应用系统已超过200个,并且持续以每月6至10个新系统上线的速度增加,服务客户覆

有货:六层混合云架构打造中国最潮生态圈

直播视频: (点击图片查看视频) 幻灯片下载地址:https://oss.aliyuncs.com/yqfiles/7ded2aa3052bb9226fd2af0a08873750.pdf 3月18日在线实时分享顺利结束,本次由有货CTO李建分享了有货为了应对流量的爆发式增长,对其整个系统做了大面积的系统重构,在数据中心.应用系统等方面全变改进,全方面地提升系统的可用性.本次视频直播的整理文章.视频.幻灯片整理完毕,如下内容. 为什么选择混合云架构? 图一 为何选择混合云架构? 为什么选择混合云