云存储自动分层系统的部署及解决方案

自动分层系统(AutomatedTieringSystem,ATS)可以在不同存储层之间迁移数据。如果数据是动态的就会被迁移到靠上的存储层,最终保存在某种固态盘(SSD)中。自动分层系统有很多种,其中影响最小也是最安全的使用方式就是将其作为保存动态数据的缓存。

  

  缓存类型的自动分层系统将动态数据从传统机械存储中拷贝到基于高速内存的缓存(RAM或者闪存固态盘)中。在这种拷贝模式中,自动分层系统被用作一个大型的读取缓存,几乎不保留数据的唯一副本。即使当他们通过缓存入站写入的写入加速器,保留唯一数据副本也仅仅需要几分钟的时间。在这些模式下,这些系统可以帮助云存储技术为更主流的存储要求提供服务。

  

  云存储系统也分为几种形式。比较常见的一种是作为NAS存储型的“价值层”,具有极高的成本效益和高度可扩展性。但是这种成本效益和可扩展性通常是以牺牲性能为代价的,使得基于云的存储系统无法被更多地用于主流的存储资源。很多用户和提供商希望能够更广泛地部署云存储,并利用自动分层系统来填补这个空白。

  

  然而,当被用于更主流的用途时,云存储系统将带来一个挑战,那就是他们通常是软件解决方案,有时候采用了提供给用户的通用硬件和磁盘驱动器。这使得成本降低下来,因为数据集被分布到多个类型的存储硬件中。现在主要的存储制造商都将精力放在了交付用于他们一级存储平台的自动分层系统上,在提升性能的同时控制住成本。然而一级存储并不常用于云存储部署中,而且主要的存储制造商也都坚持在他们的低端存储系统中提供自动分层系统技术,防止这些性能升级的系统影响到他们的一级存储市场。

  

  平衡性能差距和异构存储要求有一套来自致力于在外置存储设备上交付自动分层系统的存储提供商的自动分层系统解决方案。然后可以将这种解决方案放置于云存储网络的前端,不过这时候你可能要面对用户或者应用如何访问数据的一些挑战。

  

  自动分层系统解决方案部署就绪之后,所有网络传输都将通过这个系统。自动分层系统设备会对存储传输进行分析,然后根据它的访问特性,将动态数据块保存在高速存储层中——通常是RAM或者SSD,也可能是高速SAS。因为对这些数据的读取操作来自于高速存储区,因此可以快速地交付给用户或者应用。

  

  在基于NAS的云存储中,有很多种应用实例是要求有更高的性能。首先是安装一个比传统NAS成本更低、可扩展性更高的NAS云存储系统;一个内部私有云存储系统。在这种应用实例中,不可避免地需要比云存储系统本身设计交付更高的性能。向云存储前端添加自动分层系统往往可以解决大多数性能问题。

  

  第二个使用实例就是更经典的“云存储提供商”模式。如果一个提供商的某些用户拥有一些突然变得非常动态的数据,那么这些数据就可以被迁移到自动分层系统中。尽管这些数据的大多数请求可能是从一个速度较低的连接访问这些数据,但是1000个用户的访问合起来就可能导致存储方面的瓶颈。

  

  大多数云存储系统是“松散集群的”,这意味着单个节点的性能会成为瓶颈,因为数据并没有像和紧密配对的集群一样被分布到节点中。结果是,如果一个文件被频繁访问,那么每次它只能从一个节点被读取。解决方法就是,将这个文件拷贝到集群中的多个节点,然后改变应用以了解还有谁需要这个文件。除此之外,如果对这个文件的访问频率降低下来,则需要找到这个文件的冗余副本并进行删除。在大多数情况下,最后一个步骤很少发生,这就导致大量的空间浪费。这样就要求存储管理员付出更多额外的管理时间。

  

  另外一个更简便且更有效的解决方案就是添加自动分层系统。系统分层系统会将访问频繁的文件(或者文件片段)迁移到RAM或者基于固态盘的缓存区中。然后,当文件被频繁访问的时候,系统就会从高速存储区提供这个文件。这种方法不需要对环境进行变动(或者变动有限),当文件被频繁访问的时候可以被识别出来并迁移到高速存储中。然后,随着访问频率降低,文件将被自动迁移到缓存中。因此,存储就变成可自主管理和自主调节的存储。

  

  自动分层系统解决方案通常被用于加速高端NAS。这些系统已经拥有高速磁盘子系统和多个高速网络连接。高端NAS被用于交付机械驱动器所能提供的最佳性能。在更换整个存储阵列之前,自动分层系统往往被作为最后一种解决方法。

  

  另一方面,NAS云存储系统并不一定具有和传统NAS相同的性能水平。正如前面所说,重点往往是成本削减和可扩展性,以牺牲性能为代价。随着云存储环境的扩展——或者随着云存储被更多地用于主流应用中,原始存储性能的欠缺迫使存储经理考虑选择更传统的解决方案。他们可以考虑的选择之一就是不限制存储的自动分层应用。这两种技术的结合将提供更高的性能,同时保持了成本和可扩展性方面的优势。

时间: 2024-09-18 19:47:34

云存储自动分层系统的部署及解决方案的相关文章

云存储自动分层系统部署的解决方案

在以下的模式下,这些系统可以帮助云存储技术为更主流的存储要求提供服务.自动分层系统有很多种,其中影响最小也是最安全的使用方式就是将其作为保存动态数据的缓存.缓存类型的自动分层系统将动态数据从传统机械存储中拷贝到基于高速内存的缓存 (RAM或者闪存固态盘)中.在这种拷贝模式中,自动分层系统被用作一个大型的读取缓存,几乎不保留数据的唯一副本.即使当他们通过缓存入站写入的写入加速器,保留唯一数据副本也仅仅需要几分钟的时间. 云存储系统也分为几种形式.比较常见的一种是作为NAS存储型的"价值层"

云存储软件必须利用互联网部署这一优势

对于云存储来说,最不幸的事情莫过于其通常被认为是一个大杂货铺,在那里你可以转储任何你以后可能需要的数据.但事实是,即使在今天,你都可以利用它做更多的事情.假设我们希望云将冗余的数据转储在互联网上某个地方,你应该期望云存储软件该怎么办呢? 我之前曾经谈起过,云存储软件可以加载到你的服务器和存储上,来创造你自己的云,或者其也可以将其置于可用的关键云存储系统上.无论软件可以做什么,其如何能做到这一点才是选择云存储的一个重要的决策依据. 第一个功能是数据分布.这是云存储软件的必备功能.云是一个全球性网络

基于整数上同态加密的云存储密文检索系统

基于整数上同态加密的云存储密文检索系统 中国海洋大学   张雪娇 本文在对现有的同态加密算法进行分析比较的基础上,选出一种适用于本系统的同态加密算法:并利用该同态加密算法设计出一套检索算法,有效地完成了范围检索.利用XML构建结构化索引文件,元素的属性值是文件索引词的密文,检索时仅对索引文件的元素属性值进行检索,XML的结构化性质便于检索的实施,既保证了原文件的安全性,又能快速有效地检索到用户想要的数据.针对本文使用的同态加密算法为对称加密算法的情况,引入了RSA加密算法作为会话密钥,采用二级密

保序加密在海洋环境信息云存储密文检索系统中的应用研究

保序加密在海洋环境信息云存储密文检索系统中的应用研究 陈建翔 云计算因其经济.便利.高可扩展性等诸多优势已成为当今信息技术领域的热门话题,受到研究者的广泛关注和重视.安全性是限制云计算发展的重要因素,由于云存储在海洋云计算中占有重要地位,海洋环境信息的云存储系统中的安全问题成为海洋云计算研究的重要问题之一.本文在结合海洋环境信息的特点下研究保序加密在海洋环境信息云存储检索系统的应用,为海洋环境信息的云存储密文检索提供了一种可行方法. 保序加密在海洋环境信息云存储密文检索系统中的应用研究

云存储能用在什么样的业务系统中

本文讲的是云存储能用在什么样的业务系统中,[IT168 资讯]面对严峻的经济形势,许多公司的存储管理员开始重新评估存储流程,希望寻找一个更为经济的数据存储方案.与传统的存储系统相比,将数据归档到具有更高价值的存储层中,比如云存储,被认为是一种非常有竞争力的选择. 但是,在将数据归档到云存储系统之前,存储管理员应该弄清楚以下五个问题,以保证所选择的云存储供应商能够满足企业的业务需求. 问题1:创建全新的云存储,还是将数据迁移到云存储? 大多数的云存储服务(公共云存储或私有云存储)是建立在面向对象的

云存储的黑暗面:元数据保障

本文主旨并非阐述一个可用的架构设计,而是展示出对象存储的元数据保障中将会遇到的问题.问题往往比答案更重要.多数问题只要认识清楚,解决并非难事.但需要注意的是,没有哪个问题存在十全十美的彻底解决方案.我们所采取的策略更多的是将一个关键性问题转化成另一个次要和易于处理的问题,或者将一个问题发生的可能性尽可能降低.很多问题是无法彻底解决的,我们的现实目标是将其发生的概率下降到业务可接受的范围.因此,希望大家能够更多地关注和发掘所存在的问题,而不是紧盯方案和设计.我们相信,认清了问题之后,找到解决办法并

NAS存储系统架构云存储的方案讲解

 对于一个成功的.具有极高可扩展性的NAS存储系统来说,要想实现NAS存储系统架构云存储解决方案需要什么? 云存储的概念始于Amazon提供的一项服务(S3),同时还伴随着其云计算产品(EC2).在Amazon的S3的服务背后,它还管理着多个商品硬件设备,并捆绑着相应的软件,用于创建一个存储池.新兴的网络公司已经接受了这种产品,并提出了云存储这个术语及其相应的概念. 云存储是一种架构,而不是一种服务.你是否拥有或租赁了这种架构是一个次要问题.从根本上来看,通过添加标准硬件和共享标准网络(公共互联

直接面向终端用户 硕讯推出私有云存储平台

传统工作模式所面临的三大问题:数据存取同步的困难.大文件共享分享需要及数据管理需求.硕讯联盟将为您提供企业私有云的最佳一体化平台,使企业成员无论在任何时间.任何地点,都可从任何装置安全地存取.分享和同步单位内档案. 公有云存储涉及数据安全.存取安全.虚拟环境安全与资产安全监控等问题,就服务的使用者而言,可能会遭遇下列安全威胁:(一) 储存于公有云的数据会不会不见?(二) 公有云数据会不会被窃?(三) 公有云资料有没有加密?(四) 从个人的计算机存取公有云服务是否安全?(五) 公有云上是否有我的使

云存储运营情况两极化 一半是冰山一半是火焰

Cloudian 针对企业云存储业务进行了一项调查,结果显示云存储使用率呈上升趋势,而在使用过程中又存在哪些问题呢? 对象存储系统供应商 Cloudian 于 11 月初做了一项调查,参与调查的是来自英美的 409 位 IT 管理者,共有 16 个问题.参与者普遍反映在使用混合云存储的过程中遇到了一些困难. 用户选择混合云的首要目的是存储,调查显示,68% 的 IT 决策者已经或是计划在一年内采用公有云存储作为本地部署存储的补充.其中 28% 的公司已经开始使用云存储,40% 的公司计划在未来一