重复数据删除在主存储中的应用

现如今,重复数据删除技术已经不再让人感到陌生,其价值也已经在备份领域获得了充分的体现,如何发挥重复数据删除技术的最大价值就成为厂商们又一个需要思考的问题。重复数据删除技术向主存储 领域的延伸(NetApp公司开了重复数据删除技术在主存储应用的先河),也让我们看到了厂商期待将这项 技术能够发挥更大的价值。在2009年SNW中国大会上,HIFN向大家展示了其BitWackr重复数据删除和数据 缩减技术,笔者也借此机会与HIFN公司中国区销售总监赵强先生就重复数据删除技术在主存储领域有何 价值进行了一番探讨。

主存储数据需要重复数据删除吗?

主存储因为存放着企业的关键业务数据,用户出于安全性以及对生产系统不影响的考虑,自然而然的对重复数据删除避而远之。甚至有人还会反问:主存储需要重复数据删除技术吗?这就要先从主存储上存 放的数据谈起。

与备份不同的是,在主存储上,系统随时都在进行I/O交换操作,主存储数据的改变随时都在发生,这种特性也决定了主存储不会像备份领域(典型例子:企业每天做一个增量备份、每周做一个全备份,并长此以往、周而复始)那样存在着大量的重复数据,并且还可能存在很大的安全代价(主存储中的数据都 至关重要),因此就需要我们去定位主存储中哪些数据适合做重复数据删除或者数据压缩。

图一:在主存储和备份存储上应用重复数据删除的区别

虚拟化数据毫无疑问是主存储中比较多的重复数据,随着虚拟化的迅速发展和普及,虚拟机的迅速增多,使得这部分数据也迅速增加,因此,如何对这部分数据进行安全可靠的重复数据删除和数据压缩就成为考验厂商的一道难题。

图二:HIFN BitWackr技术对虚拟数据去重的示意图

时间: 2024-09-17 04:19:19

重复数据删除在主存储中的应用的相关文章

为什么重复数据删除对于云存储而言如此重要?

 [51CTO.com快译]大多数人认为云存储服务较实体存储更便宜.毕竟大家可以根据性能与访问需求以每TB每年276美元甚至更低的价格租用存储资源.相比之下,企业数据仓库的每TB每年使用成本一般在2500美元到4000美元之间. 然而除了一级数据之外,大家还需要在云环境下对数据进行备份或者副本保存,这无疑会令资源使用支出大幅提升.设想一下,若企业需要以三年为周期每月保留100 TB备份数据,则其原始备份数据约等于3.6 PB,每月支出将超过83000美元.而且这还不算数据访问以及检索带来的成本.

CIO关注:重复数据删除技术避免存储黑洞

       企业信息系统选型宝典存储备份漫长的等待时间,和瞬间海量数据的增长,对于CIO来说都是一个痛苦的过程.他们眼看着宝贵的存储资源在慢慢被耗尽,又束手无策.数据备份和恢复,是保证企业信息安全的必由之路,但如何有效地利用存储资源,从而缓解存储压力,重复数据删除技术给CIO们提供了一个不错的选择. 机遇 OPPORTUNITY Gartner认为,在未来18个月内,重复数据删除技术(DataDe-duplication)将扮演重要的角色,以帮助企业得以自如地控制日益堆积如山的数据,以达到企业

重复数据删除技术在备份中的应用体会

   2007年底,熊猫电子集团选择EMC Avamar重复数据删除技术,建成了同行业中领先的数据备份系统.目前,这一技术已经在熊猫电子成功应用近一年了.在此介绍我们的应用经验,希望可以给国内同行提供有益的启示. 数据对熊猫集团的意义 南京熊猫电子集团创始于1936年,是一家具有70多年历史的国有综合性大型电子信息企业.1996年,熊猫集团控股的南京熊猫电子股份有限公司分别在香港联交所和上海证交所上市,成为国内电子行业第一家拥有H股的上市公司.南京熊猫电子集团下设家用电器产业集团.机电仪产业集团

基于重复数据删除的虚拟桌面存储优化技术

近年来,云计算已成为分布式计算领域中的研究热点,它是指运行在数据中心软硬件上的应用通过Internet为用户按需提供服务:并将数据中心内的软硬件资源统称为云,云计算自身并不是一种新技术,而是一种新服务模式.这种模式能够将设备安装和资源管理外包给云服务商,具有按使用计费和扩展灵活的特性,通过对IT资源的统一部署与集中管理,云计算能够优化资源的利用率,为用户提供廉价.高效.可靠的服务. 虚拟桌面作为一种典型的云计算应用,是建立在服务器虚拟化基础上的云应用.如图1所示,虚拟桌面基础架构在云中为用户提供

关于重复数据删除的三道选择题

作者:郭涛 5月20日,NetApp公司宣布以15亿美元(现金加股票)的价格收购重复数据删除厂商DataDomain.如果一切顺利,此项收购将在2-4个月内完成.收购DataDomain使得NetApp在重复数据删除市场有了与EMC.IBM等大厂商分庭抗礼的资本. 扩张说与瓶颈说 NetApp收购DataDomain的消息来得突然,却在意料之中.国内一位多年从事数据备份研究的专业人士告诉记者,自从上市以来,DataDomain公司的财务报表一直良好.这可能为DataDomain今日被收购埋下了伏

重复数据删除

重复数据删除技术在一两年前已经收到人们的关注,重复数据删除初创厂商Data Domain公司在一两年更是吸引了人们大部分的眼球,业绩的飞速增长.用户的迅速增加,让Data Domain公司以让人难以置信的速度扩张着,Data Domain更是在06年纳斯达克上市.然而在2008年,重复数据删除领域,已经不再是Data Domain一家风光了,EMC.IBM.NetApp.飞康.Sepaton.HP.Sun.HDS.昆腾等公司纷纷行动起来,瞬间,整个市场由一枝独秀变成群雄逐鹿了,而且整个市场呈现出

重复数据删除技术疑问集锦

问:关于重复数据删除产品,我想问的是基于软件的重复数据删除和基于硬件的重复数据删除哪个更好了,它们各自的优缺点是什么了? 答:基于软件的重复数据删除旨在消除源的冗余,而基于硬件的重复数据删除强调存储系统本身的数据削减.虽然基于硬件的重复数据删除无法提供带宽补偿,而在源中进行重复数据删除中有可能获得带宽补偿,但是基于硬件的重复数据删除的压缩级别通常会更高,并且基于硬件的重复数据删除产品需要的维护更少. 硬件重复数据删除设备以它们的高性能.可扩展性以及相对不间断的部署而备受关注.正常情况下,备份软件

你可能不了解的重复数据删除产品

在今天,重复数据删除产品已经不仅仅只有惠普.EMC (Avamar和Data Domain).Asigra.赛门铁克.Atempo和CommVault这几家才有了,让我们来看看下面这些你可能并没有接触的重复数据删除产品: 1. NextGen Storage NexGen的Phased Data Reduction的基本前提是目前的重复数据删除工具都是针对备份流程的,但未来这种做法可能不是最好的. NexGen Storage的首席执行官及创始人John Spiers表示,"你听到很多新的厂商,

昆腾推出简化版重复数据删除解决方案

 11月20日,昆腾公司发布了针对中小企业环境优化的全新配置DXi设备,以及旨在帮助渠道合作伙伴更高效地进行评估.订购和安装重复数据删除解决方案的新配置计划.DXi7500 Express磁盘备份系统和QuikFit配置计划共同简化重复数据删除解决方案在各种分布式中端环境内的部署和管理. DXi7500 Express是一种交钥匙型DXi7500重复数据删除解决方案,提供中端环境所需的所有硬件和软件 ,包括VTL和NAS接口许可证.对于用于多地点环境和边缘到核心架构中的系统,客户可以选择升级系统