横向扩展存储方案的设计原则

随着
大量数据">非结构化数据的迅建飙升,数据的存储、收集、分析和处理等都面临着新的挑战,传统的垂直扩展存储已经难以经济的应对目前数据存储的需求,而横向扩展存储则以高性能/高吞吐量、高可靠性/高可用性、高可扩展性、
低成本、低TCO等特点脱颖而出,经济高效地
摆脱纵向扩展的局限。为了豫,为了实现横向扩展存储解决方案的最优化,构架时应
遵循以下
几点原则:   1、可适应不同规模的数据存储   大数据时代来临,数据像潮水一样汹涌来袭,从几千个G到几百个TB再到几十个PB,呈几何数级的增长,因此在选择存储架构时,
首先要考虑数据规模的
大小和未来数据量的增长,选择适合的横向存储构架来实现存储规模的可持续化扩展,保护投资。   2、存储的高可靠性及可访问性   大数据时代,数据成为新的“金矿”。所以在实现数据规模化存储的同时,更要保证数据存储的安全性,确保不因部分软硬件故障造成数量丢失。同时,越来越多的大数据应用需要“随时在线”的数据以供快速的检索查询、
深入的数据分析挖掘。 因此,传统的冷数据存储的手段如磁带库已经无法满足大数据时代的要求。而经过优化的横向扩展存储,能够在保护数据可靠性的同时,以优化的构建及运营成本,使用户的冷、热数据均随时保持可访同。   3、易于扩展   随着业务增长,面对无法预测的数据存储和容量需求,新的存储构架应该是易于扩展的,可以弹性高效的进行扩展和提高性能。企业无须超前购买超过现有存储量所需的存储设施。(电源或冷却)架构、电力以及机柜,只需随着业务的增长量的随需应变的布置横向扩展存储系统,即可与原存储系统进行无缝融合。   4、性能的弹性扩充   存储的数据对象有不同的类型,有些是较大的文件和数据流,有些是较小的数据块,有些要求高实时性和及时响应应性,有些则可以响应延时,应对不同的存储需求就需要通过软件和硬件结合,制定弹性性能计划,满足不同类型的存储需求。   5、开放式架构   采用开放的英特尔服务器平台构建的存储能够利用英特尔服务器处理平台的高性能,搭配不同性能的存储介质、网络技术,结合软件的
丰富存储、管理功能。能够灵活地实现面向不同功能,性能应用的存储方案。同时,开放的英特尔服务器平台避免了存储产品的对专有技术硬件或特定供应商硬件的依赖,通常能够帮助存储实现更有竞争力的成本,提高后续维护的便利性及效率。   6、运维效率和成本   在采购成本方面,由于横向扩展存储是由模块化的组件构成,企业只需要根据业务量添加存储资源,无需一次性投入大量的起始资金,降低了运营成本,实现与数据增长保持同步的按需投资。   7、降低管理的
复杂度   存储系统的维护是另一个确保数据可靠,可用及性能的关键因素。通常,存储系统的管理需要专业的知识与人员,传统方案的大规模存储在维护多个存储节点时,需要管理员单独照料每个独立的存储系统,带来对管理上极高的复杂度和人力负担。横向扩展存储虽然有几十甚至上千个节点组成,但其集中管理的能力使管理员在管理这些节点时,就像在管理一台单一的设备,极大地增强了管理的便利性,减少对维护者的技能与人力要求。

时间: 2024-08-30 13:07:39

横向扩展存储方案的设计原则的相关文章

横向扩展存储的市场应用

在信息化时代,数据呈现爆炸式增长,尤其是越来越多的影音.图像非结构化数撼的传输对存储系统提出了新的挑战,容量.成本.吞吐量.响应时间.灵活性.容错性能等成为考量存储系统的重要因素.而横向扩展存储则以高扩展性.灵活性.易管理及低成本等优势.在越来越多的行业客户中得到应用并快速普及. 目前典型的应用领域包括移动互联网.智慧城市.智能交通.智慧医疗.智慧生活.多媒体处理.零售.广告.工业等. 移动互联网 我们每-天的常规上网活动都会产生大量的数据,从网络购的.打电话.上网冲浪到访问社交网站,新数据层出

中国横向扩展存储的商机与市场前景

在宽带化.移动互联网.物联网.社交网络.云计算的催生下.大数据时代悄然来临.IDC(互联网数据中心)的研究报告称,未来十年全球大数据将增长5O倍,计算无处不在,数据正呈现爆炸式增长.在中国,这一趋势尤为明显,目前中国互联网用户已经超过5.9亿,博客.微信用户数量也分别超过了4亿,新的智艇手机用户数量已达到3亿,新的个人电脑和平板电脑用户远远超过1亿.在这些数字的背后,折射出的是数据的产生量和访问量的爆炸式增长. 大数据时代的到来为横向扩展存储带业商机 互联网已经走进千家万户,与我们的工作.生活.

HBase大对象存储方案的设计与实现

HBase大对象存储方案的设计与实现 南京大学   康毅 海量数据的时代正在到来,随着互联网的急速发展,网络访问量.网络访问日志.通讯记录.视频资料.移动网络和各种智能终端所产生的巨大数据集的规模也在急剧扩大.而其数据集的一个重要特点体现在:超过80%的数据是非结构化的.传统技术无法胜任大数据集的分析.管理和挖掘,目前业界对于大数据处理的一种流行解决方案为HBase. HBase不同于一般的关系数据库,它是一个适合于非结构化数据存储的数据库.而非结构化数据作为一个大对象(Large Object

初创公司Elastifile提供为闪存而生的横向扩展存储软件

Elastifile即将发布一款横向扩展的文件存储系统,采用闪存并且覆盖私有云和公有云.   去年1月我们首次听说以色列公司Elastifile,当时这家公司在B轮融资中获得3500万美元.Elastifile开发的技术就像是让存储重生,当时我们是这样写的:"企业级的.Web级的存储软件运行采用全闪存介质,提供文件.对象和块存储访问协议.它的技术是硬件和虚拟机管理程序无关的--听起来像是一个近乎通用的存储库." 2016年6月思科向这家公司投入了一笔资金. 现在Elastifile已经

横向扩展NAS迎战大数据的5大原则

对将http://www.aliyun.com/zixun/aggregation/13739.html">非结构化数据转化为可操作的商业智能的美好前景感到兴奋?你需要做的第一步是创建一个可以处理PB级数据的820.html">存储架构.EMCIsilon的Nick Kirsch表示,横向扩展NAS(网络附加存储)是最佳解决方案,他还为首席信息官提供了用以判断横向扩展NAS的五个原则. 随着企业开始进军大数据世界---数字化纸张文件和保存电子邮件通信,Word文档.Exce

传统存储市场正遭遇来自横向扩展SDS 的威胁

   传统的存储厂商正面临着前所未有的压力.软件定义存储与公有云存储(也是基于横向扩展的SDS技术)相结合的解决方案正在蚕食传统的存储市场,如Dell EMC的VNX.HPE的Smart Array.NetApp的E系列和FAS.我同样认为基于简单的双控制器架构的外部存储将遭遇长期衰退.下面我会解释原因. 闪存优先.横向扩展SDS的秘密武器 横向扩展存储在所有类型的负载上都对传统存储造成了巨大的压力.从传统架构到SDS的转变是需要时间的,公司需要通过不同的案例来验证SDS,但从传统存储转向软件定

横向扩展的NAS:混合云存储的关键

目前,世界上大多数的数据中心仍然使用垂直缩放的存储解决方案,这是一个困扰人们的问题.这种传统的存储方法在设计时并没有考虑到现在达到泽字节的庞大数据.企业以往任何时候需要存储更多的指数的数据,他们需要采用不损害性能的经济实惠的方式来进行.软件定义存储的出现使得横向扩展存储解决方案成为了现实. 如今出现的另一个相对较新的技术混合云,使组织折云架构具有最大的业务灵活性,这有助于在达到预算和性能目标的同时,最大限度地提高效率.简而言之,混合云是一个使用混合的内部部署,私有云和公共云服务的组合,以及业务流

EMC为大数据解决方案包添加横向扩展计算选项

EMC公司和Pivotal今天发布数据湖Hadoop2.0包,面向客户的预测分析场景构建横向扩展数据湖,提供一种包含计算.分析和存储在内的交钥匙方案. 作为一种面向由传统和下一代工作负载产生的关键数据,可无限可扩展的知识库,数据湖正蓄势待发.EMC的横向扩展数据湖以企业级特性为设计之本,帮助组织从大数据中获得直接的商业价值. 今年早些时候,EMC和Pivotal发布了第一个数据湖Hadoop包-基于企业级横向扩展存储与企业级Hadoop预测分析的融合方案.数据湖Hadoop包2.0现已发布,包括

混合云部署中横向扩展NAS起关键作用

目前,世界上大多数的数据中心仍然使用垂直缩放的存储解决方案,这是一个困扰人们的问题.这种传统的存储方法在设计时并没有考虑到现在达到泽字节的庞大数据.企业以往任何时候需要存储更多的指数的数据,他们需要采用不损害性能的经济实惠的方式来进行.软件定义存储的出现使得横向扩展存储解决方案成为了现实. 如今出现的另一个相对较新的技术混合云,使组织折云架构具有最大的业务灵活性,这有助于在达到预算和性能目标的同时,最大限度地提高效率.简而言之,混合云是一个使用混合的内部部署,私有云和公共云服务的组合,以及业务流