云在脚下 三大云存储方案对比选型导购

业界对云计算的定义多种多样,不过,从公认的几种云计算模型看,存储是无论如何也绕不开的基础支撑组件,云存储作为云计算服务的分支之一,更是把存储提到了首要的位置。与此同时,能够在底层架构中很好的解决存储问题的供应商恐怕并不多,要实现云计算,存储还面临诸多瓶颈。

  在一次Intel组织的媒体训练营上,Intel(中国)有限公司服务器平台产品经理张振宇就曾表示:“今天谈云计算以及云架构中的虚拟化,存储是非常困难的问题。”

  解决非结构化数据增长难题

  在Intel规划的云存储系统中,把用户实际的存储需求分成了两种类型,也就是我们所谓的结构化数据与非结构化数据。

  结构化数据一般都存储在数据库中,通常又被叫做数据库数据,通常企业的关键业务应用,如Oracle、SAP等应用中往往基于这种类型的数据。这类型数据可以用数据库的二维表结构逻辑来表达与实现,每一次读取的数据块往往并不大,一般为4K或者8K,但是读写往往会非常频繁,由于每次读写都会带来硬盘磁头换道寻址的读写延时,因此传统的存储系统往往采用了大规模并发、以及大量的读写优化来保障结构化数据的存取需求。

  此外,担当企业关键业务应用的数据存储基石,数据安全性一定要保障,也因此,为结构化数据存储而设计的存储系统也往往采用大量的数据安全保护措施,保障企业关键业务运营数据安全。

  衡量数据库读写性能的IOPS性能指标一度成为企业存储系统设计所追求的极致,然而随着云计算日益走向普及应用,社交网络兴起,到如今移动互联网与物联网蓬勃发展,用户突然发现,过去的结构化的数据在向非结构化与半结构化发展,大数据成为对传统IT系统的另一个挑战。

  上图为IDC发布的2010年至2014年间数据增长趋势预测,其中,最底下的黄色数据块代表传统企业数据库所产生的结构化数据增长量,年增长率仅为23.6%;黄色数据之上的红色数据,代表企业系统中的备份以及数据仓库等产生的备份数据,从图中可看到,其增长趋势并不明显,年增长率为24.2%;红色数据之上的灰色数据块代表归档等非结构化数据的增长趋势,在图中可看到明显的上升,年增长率达到了54.8%;最上面的绿色部分增长最快,这部分数据的年增长率甚至达到了75.6%,这部分数据来自于内容仓库,具体包括了Web、电子邮件、社交网络、文档共享等应用产生的各种各样的文件数据。

  三大云存储解决方案

  随着数据宇宙的爆炸式增长,传统为结构化数据存储而设计的存储系统,已经无法应付云平台系统庞大的数据存储需求,在此背景下,集群存储迎来其发展高峰。

  集群存储通过并发的分布式文件系统与算法,工作负载分布到集群中各节点的存储方式,各集群存储的节点相互配合并统一作战,因而达到了1+1>2的效果,同时集群存储提供单一的使用接口与界面,使用户可以方便地对所有数据进行统一使用与管理。对于集群存储来说,单个的数据节点是其上分布式文件系统以及管理软件的硬件基础,其性能与可靠性直接影响到了存储系统平台的整体性能。

  针对不同的云存储环境中非结构化数据的应用,Intel提出了三大不同的针对应用优化的解决方案。

  一、 较大的对象存储使用模式

  对象存储一般用于内容仓库的数据存储,通常Web、电子邮件、社交网络、文档共享系统中通常会采用对象存储模式来存储大量的文件数据。这类型存储需求对系统性能要求总体而言并不严格,但同样要求一定的响应时间和反应速度。此外,考虑到系统的规模化建设,整体系统对系统能耗、成本方面都会进行一定的均衡。

  针对对象存储对节点硬件设计的需求,Intel推荐采用至强E5处理器产品家族,至强E5处理器是Intel针对双路服务器市场的重要革新,采用全新Sandy Bridge微架构,最多支持8个内核,在旧金山闭幕不久的Intel秋季IDF大会上,Intel展示了采用Sandy Bridge微架构Xeon(至强)E5处理器以及Xeon E5服务器系统的工程样品。上图为该系统节点推荐配置示意。

  二、 备份、归档存储使用模式

  相比对象存储使用模式,备份和归档系统对于数据响应时延的需求更加宽松,这类型系统中,用户更为关注的是数据可靠性,能耗、以及单位存储空间成本,针对这类型存储使用模式,Intel推荐了基于至强E3处理器,以及Intel赛扬/酷睿 i3处理器系列的节点优化方案。

  三、 大规模分析(Hadoop)使用模式

  Hadoop通常用于海量文件的数据分析与处理,往往要求系统有快速的反应时间和较强的处理能力,上图为Intel基于E5处理器家族推荐的节点优化架构。

(责任编辑:蒙遗善)

时间: 2024-10-25 21:36:35

云在脚下 三大云存储方案对比选型导购的相关文章

三大云存储方案对比选型导购

业界对云计算的定义多种多样,不过,从公认的几种云计算模型看,存储是无论如何也绕不开的基础支撑组件,云存储作为云计算服务的分支之一,更是把存储提到了首要的位置.与此同时,能够在底层架构中很好的解决存储问题的供应商恐怕并不多,要实现云计算,存储还面临诸多瓶颈. 在一次Intel组织的媒体训练营上,Intel(中国)有限公司服务器平台产品经理张振宇就曾表示:"今天谈云计算以及云架构中的虚拟化,存储是非常困难的问题." 解决非结构化数据增长难题 在Intel规划的云存储系统中,把用户实际的存储

GoogleDrive、Dropbox、SkyDrive云存储服务对比

几年前就有传言说google或推出云端存储服务,直到2012-4-24,Google Drive终于来了,中文名"Google 云端硬盘". 很多人都很期待Google推出的云存储服务,因为多数人相信,没有比google更适合做云存储的公司了,作为一个标准的Web公司或者说互联网公 司,云端理所应当的优秀.但比起几年前听传言时的激动,真正的Google Drive发布时,笔者对于google的云存储服务已经远没有以前的热情了.因为现有的云存储服务已经完全满足笔者的需求,更何况笔者用dr

墙内三大云数据库测试对比 不指定

我司CTO和技术总监都是腾讯系的,所以我们一开始就选用腾讯云的服务.他们家的云数据库提供了可视化的运维操作页面和自动备份的能力,降低了DB运维的门槛.同时云数据库还支持高可用架构,对数据的安全性和服务的可靠性更有保障.另外有的云数据库厂商还提供了诸如数据库审计.慢查询分析.数据回档等能力,大大减轻了数据库运维和DBA的工作量. 其实我们就没有专门的DBA,都是开发自己上去折腾,通过把数据库的可靠性外包给云端,确实极大地降低了我们的工作量,这一点还是挺爽的.但是在具体的使用过程中,发现还是有些地方

国内三大云数据库测试对比

我司 CTO 和技术总监都是腾讯系的,所以我们一开始就选用腾讯云的服务.他们家的云数据库提供了可视化的运维操作页面和自动备份的能力,降低了数据库运维的门槛.同时云数据库还支持高可用架构,对数据的安全性和服务的可靠性更有保障.另外有的云数据库厂商还提供了诸如数据库审计.慢查询分析.数据回档等能力,大大减轻了数据库运维和 DBA 的工作量. 其实我们就没有专门的 DBA,都是开发自己上去折腾,通过把数据库的可靠性外包给云端,确实极大地降低了我们的工作量,这一点还是挺爽的.但是在具体的使用过程中,发现

企业云存储方案选择攻略

根据IDC的数据显示,到2013年,云存储服务的增长率预计将超过所有其他IT云服务.在未来四年内,云服务的市场规模将从现在的174亿美元增长到442亿美元,其中,云存储的市场比例将从目前的9%增长到14%,也就是说云存储的市场规模将接近62亿美元. 在我国,云存储成为网络经济下一个新的增长点似乎已经成为一种共识,目前基于云存储概念的网盘市场已经聚集了诸如网易.腾讯.DBank(华为背景).金山.联想等诸多的知名企业. 虽然云存储已经成为我国存储厂商快速成长的重要突破点,但是由于运营模式和客户侧重

戴尔存储方案助苏州工业园区私有云平台

提及戴尔,已经从原有PC厂商转型到端到端解决方案供应商,通过近些年的并购,戴尔逐渐形成了从服务器.存储.网络等方面拥有独立的产品线,而如今的戴尔致力于为中小型企业提供云计算平台上平衡而适用的端到端解决方案,以满足客户对数据应用的需求. 戴尔通过收购获取创新技术 作为转型阶段的戴尔,逐渐形成了从服务器.存储.网络以及服务等方面拥有独立的解决方案,提供端到端的用户IT应用方案,特别是中小企业方面,针对服务器.存储市场用户需求进行产品研发和推广,在虚拟化和云计算趋势下,利用创新的产品技术提供用户私有云

苏州工业园采用戴尔EqualLogic云存储方案

成立于1994年的苏州工业园区是经国务院批准,由中国和新加坡合作而设立的国家级开发区.2011年,苏州工业园区计算机信息中心开始构建苏州工业园区电子政务私有云平台在进行"电子政务私有云平台"项目建设中,苏州工业园区计算机信息中心决定,将云存储系统平台建设作为"电子政务私有云平台"项目建设的重中之重. 业务挑战:应用不停.安全可靠.成本严控.物尽其用.智能高效.面向未来 第一,应用系统要永远在线,各类信息服务绝对不能因为系统维护.数据迁移.意外故障而暂停或停滞; 第二

iCloud Photo Library:苹果用户最理想的照片云存储方案?

就在刚刚,一直对苹果iCloud抱着极大不信任的我,打开了iOS8里的"iCloudPhotoLibrary(Beta)"选项. 不信任iCloud,是因为它作为苹果出品的云服务,已经不止一次地弄丢我的工作文件--包括一份写了一上午的采访稿子.脑爆会议后的一份MindNode文件以及若干不重要文件. 而在这样的前提下还愿意去尝试iCloud的PhotoLibrary服务,是因为它目前最接近我理想中的图片云存储方案. 我的需求是这样的:1.手机拍的照片自动备份到云端.2.该云服务足够可靠

NVR云存储方案曾是主流

视频监控作为时候查证的重要依据,在在银行.司法.平安城市的应用非常的广泛,而且随着技术的发展和时代的需求,很多地方安装的是高清摄像头.而这些地方的数据需要存储的时间在1-3个月甚至是半年以上.高清时代的到来,不仅要求的是摄像头的清晰度高清,其存储的画面也有高清的要求,这就是对存储技术提出了极大的挑战. 高清监控的存储要求 根据现代安防监控对存储的要求可以简单的总结为"五高": 高容量:高清化带来存储容量猛增,需要稳定可靠的大容量存储:提高单套系统容量:通过SAS扩展级联多个JBOD,支