剖析云存储

云存储(cloud storage)这个概念一经提出,就得到了众多厂商的支持和关注。Amazon在两年前就推出的Elastic Compute Cloud(EC2:弹性计算云)云存储产品,旨在为用户提供互联网服务形式同时提供更强的存储和计算功能。

云存储(cloud storage)这个概念一经提出,就得到了众多厂商的支持和关注。Amazon在两年前就推出的Elastic Compute Cloud(EC2:弹性计算云)云存储产品,旨在为用户提供互联网服务形式同时提供更强的存储和计算功能。内容分发网络服务提供商CDNetworks和业界著名的云存储平台服务商 Nirvanix发布了一项新的合作,并宣布结成战略伙伴关系,以提供业界目前唯一的云存储和内容传送服务集成平台。半年以前,微软就已经推出了提供网络移动硬盘服务的Windows Live SkyDrive Beta测试版。近期,EMC宣布加入 道里可信基础架构项目,致力于云计算环境下关于信任和可靠度保证的全球研究协作,IBM也将云计算标准作为全球备份中心的3亿美元扩展方案的一部分。

云存储变得越来越热,大家众说纷”云”,而且各有各的说法,各有各的观点,那么到底什么是云存储?

1 什么是云存储

云存储在云计算 (cloud computing)概念上延伸和发展出来的一个新的概念。云计算是是分布式处理(Distributed Computing)、并行处理(Parallel Computing)和网格计算(Grid Computing)的发展,是透过网络将庞大的计算处理程序自动分拆成无数个较小的子程序,再交由多部服务器所组成的庞大系统经计算分析之后将处理结果回传给用户。通过云计算技术,网络服务提供者可以在数秒之内,处理数以千万计甚至亿计的信息,达到和”超级计算机”同样强大的网络服务。

云存储的概念与云计算类似,它是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。

如果这样解释还是难以理解,那我们可以借用广域网和互联网的结构来解释云存储。

云状的网络结构

相信大家对局域网、广域网和互联网都已经非常了解了。在常见的局域网系统中,我们为了能更好地使用局域网,一般来讲,使用者需要非常清楚地知道网络中每一个软硬件的型号和配置,比如采用什么型号交换机,有多少个端口,采用了什么路由器和防火墙,分别是如何设置的。系统中有多少个服务器,分别安装了什么操作系统和软件。各设备之间采用什么类型的连接线缆,分配了什么 xml:lang=IP地址和子网掩码。

但当我们使用广域网和互联网时,我们只需要知道是什么样的接入网和用户名、密码就可以连接到广域网和互联网,并不需要知道广域网和互联网中到底有多少台交换机、路由器、防火墙和服务器,不需要知道数据是通过什么样的路由到达我们的电脑,也不需要知道网络中的服务器分别安装了什么软件,更不需要知道网络中各设备之间采用了什么样的连接线缆和端口。

广域网和互联网对于具体的使用者是完全透明的,我们经常用一个云状的图形来表示广域网和互联网。虽然这个云图中包含了许许多多的交换机、路由器、防火墙和服务器,但对具体的广域网、互联网用户来讲,这些都是不需要知道的。这个云状图形代表的是广域网和互联网带给大家的互联互通的网络服务,无论我们在任何地方,都可以通过一个网络接入线缆和一个用户、密码,就可以接入广域网和互联网,享受网络带给我们的服务。

参考云状的网络结构,创建一个新型的云状结构的存储系统系统,这个存储系统由多个存储设备组成,通过集群功能、分布式文件系统或类似网格计算等功能联合起来协同工作,并通过一定的应用软件或应用接口,对用户提供一定类型的存储服务和访问服务。

当我们使用某一个独立的存储设备时,我们必须非常清楚这个存储设备是什么型号,什么接口和传输协议,必须清楚地知道存储系统中有多少块磁盘,分别是什么型号、多大容量,必须清楚存储设备和服务器之间采用什么样的连接线缆。为了保证数据安全和业务的连续性,我们还需要建立相应的数据备份系统和容灾系统。除此之外,对存储设备进行定期地状态监控、维护、软硬件更新和升级也是必须的。

如果采用云存储,那么上面所提到的一切对使用者来讲都不需要了。云状存储系统中的所有设备对使用者来讲都是完全透明的,任何地方的任何一个经过授权的使用者都可以通过一根接入线缆与云存储连接,对云存储进行数据访问。

云存储不是存储,而是服务

就如同云状的广域网和互联网一样,云存储对使用者来讲,不是指某一个具体的设备,而是指一个由许许多多个存储设备和服务器所构成的集合体。使用者使用云存储,并不是使用某一个存储设备,而是使用整个云存储系统带来的一种数据访问服务。所以严格来讲,云存储不是存储,而是一种服务。

云存储的核心是应用软件与存储设备相结合,通过应用软件来实现存储设备向存储服务的转变。

2 云存储的结构模型

与传统的存储设备相比,云存储不仅仅是一个硬件,而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的复杂系统。各部分以存储设备为核心,通过应用软件来对外提供数据存储和业务访问服务。云存储系统的结构模型如下:

云存储系统的结构模型由 4层组成。

一、存储层

存储层是云存储最基础的部分。存储设备可以是FC光纤通道存储设备,可以是NAS和 iSCSI等IP存储设备,也可以是 SCSI或SAS等 DAS存储设备。云存储中的存储设备往往数量庞大且分布多不同地域,彼此之间通过广域网、互联网或者 FC光纤通道网络连接在一起。

存储设备之上是一个统一存储设备管理系统,可以实现存储设备的逻辑虚拟化管理、多链路冗余管理,以及硬件设备的状态监控和故障维护。

二、基础管理层:

基础管理层是云存储最核心的部分,也是云存储中最难以实现的部分。基础管理层通过集群、分布式文件系统和网格计算等技术,实现云存储中多个存储设备之间的协同工作,使多个的存储设备可以对外提供同一种服务,并提供更大更强更好的数据访问性能。

CDN内容分发系统、数据加密技术保证云存储中的数据不会被未授权的用户所访问,同时,通过各种数据备份和容灾技术和措施可以保证云存储中的数据不会丢失,保证云存储自身的安全和稳定。

三、应用接口层:

应用接口层是云存储最灵活多变的部分。不同的云存储运营单位可以根据实际业务类型,开发不同的应用服务接口,提供不同的应用服务。比如视频监控应用平台、IPTV和视频点播应用平台、网络硬盘引用平台,远程数据备份应用平台等。

四、访问层:

任何一个授权用户都可以通过标准的公用应用接口来登录云存储系统,享受云存储服务。云存储运营单位不同,云存储提供的访问类型和访问手段也不同。

3 云存储的技术前提

从上面的云存储结构模型可知,云存储系统是一个多设备、多应用、多服务协同工作的集合体,它的实现要以多种技术的发展为前提。

一、宽带网络的发展

真正的云存储系统将会是一个多区域分布、遍布全国、甚至于遍布全球的庞大公用系统,使用者需要通过ADSL、DDN等宽带接入设备来连接云存储,而不是通过FC、 SCSI或以太网线缆直接连接一台独立的、私有的存储设备上。只有宽带网络得到充足的发展,使用者才有可能获得足够大的数据传输带宽,实现大量容量数据的传输,真正享受到云存储服务,否则只能是空谈。

二、 WEB2.0技术

Web2.0 技术的核心是分享。只有通过web2.0技术,云存储的使用者才有可能通过 PC、手机、移动多媒体等多种设备,实现数据、文档、图片和视音频等内容的集中存储和资料共享。Web2.0技术的发展使得使用者的应用方式和可得服务更加灵活和多样。

三、应用存储的发展

云存储不仅仅是存储,更多的是应用。应用存储是一种在存储设备中集成了应用软件功能的存储设备,它不仅具有数据存储功能,还具有应用软件功能,可以看作是服务器和存储设备的集合体。应用存储技术的发展可以大量减少云存储中服务器的数量,从而降低系统建设成本,减少系统中由服务器造成单点故障和性能瓶颈,减少数据传输环节,提供系统性能和效率,保证整个系统的高效稳定运行。

四、集群技术、网格技术和分布式文件系统

云存储系统是一个多存储设备、多应用、多服务协同工作的集合体,任何一个单点的存储系统都不是云存储。

既然是由多个存储设备构成的,不同存储设备之间就需要通过集群技术、分布式文件系统和网格计算等技术,实现多个存储设备之间的协同工作,使多个的存储设备可以对外提供同一种服务,并提供更大更强更好的数据访问性能。如果没有这些技术的存在,云存储就不可能真正实现,所谓的云存储只能是一个一个的独立系统,不能形成云状结构。

五、 CDN内容分发、P2P技术、数据压缩技术、重复数据删除技术、数据加密技术

CDN内容分发系统、数据加密技术保证云存储中的数据不会被未授权的用户所访问,同时,通过各种数据备份和容灾技术保证云存储中的数据不会丢失,保证云存储自身的安全和稳定。如果云存储中的数据安全得不到保证,想来也没有人敢用云存储,否则,保存的数据不是很快丢失了,就是全国人民都知道了。

六、存储虚拟化技术、存储网络化管理技术

云存储中的存储设备数量庞大且分布在多不同地域,如何实现不同厂商、不同型号甚至于不同类型(如FC存储和 IP存储)的多台设备之间的逻辑卷管理、存储虚拟化管理和多链路冗余管理将会是一个巨大的难题,这个问题得不到解决,存储设备就会是整个云存储系统的性能瓶颈,结构上也无法形成一个整体,而且还会带来后期容量和性能扩展难等问题。

云存储中的存储设备数量庞大、分布地域广造成的另外一个问题就是存储设备运营管理问题。虽然这些问题对云存储的使用者来讲根本不需要关心,但对于云存储的运营单位来讲,却必须要通过切实可行和有效的手段来解决集中管理难、状态监控难、故障维护难、人力成本高等问题。因此,云存储必须要具有一个高效的类似与网络管理软件一样的集中管理平台,可实现云存储系统中设有存储设备、服务器和网络设备的集中管理和状态监控。
本文转自d1net(转载)

时间: 2024-08-02 07:55:50

剖析云存储的相关文章

深度剖析云存储

云存储(cloud storage)这个概念一经提出,就得到了众多厂商的支持和关注.Amazon在两年前就推出的Elastic Compute Cloud(EC2:弹性计算云)云存储产品,旨在为用户提供互联网服务形式同时提供更强的存储和计算功能.内容分发网络服务提供商CDNetworks和业界著名的云存储平台服务商 Nirvanix发布了一项新的合作,并宣布结成战略伙伴关系,以提供业界目前唯一的云存储和内容传送服务集成平台.半年以前,微软就已经推出了提供网络移动硬盘服务的Windows Live

云存储大热:商业模式或仍在云端

每当你登录微博,微博小秘书会温馨地提醒你有2G的"微盘"供你使用:每当你登录邮箱,邮箱提示会告诉你邮箱有1G的网盘空间正空闲:每当你登录搜索引擎,也会告知你有超大的15G网盘是免费赠送的--作为一个互联网用户,这种从天而降的"免费午餐"在感觉上是幸福的,但对于众多涌入云存储市场的互联网服务商而言,他们却不得不面对这样一种尴尬:一旦收费,用户就可能掉头而去.这种情况和曾经试图收费的电子邮件服务颇为类似,那为何仍然有新浪.百度.网易.腾讯等众多的巨头对云存储市场趋之若鹜

云存储能否成为数据安全灵药?几个角度全方位剖析

 [51CTO.com快译]云存储已经成为目前最为流行的数据保护手段.从个人到各类企业都在尝试利用云存储服务保护文件,同时借此实现随时随地访问能力.不过在经过数次云服务供应商数据泄露事故之后,云存储的数据安全性亦成为用户面临的切实难题. 那么,我们是否该继续依赖云存储以实现数据安全? 云安全漏洞其实与云无关 云环境下的数据泄露事故其实与云本身并无关系.各大云供应商一直对自家云存储设施加以严格保护,而泄露问题实际上出现在个别密码保护服务当中.这也是黑客们访问个别账户的惟一方式.这意味着云仍是数据存

网络硬盘就是云存储吗?

席卷神州大地的云热潮让"云某某"俨然成为了泛社会化的大名词.从家中常见的3C电器,到出门手中的移动电话.电脑,再到机房.数据中心,最后扩展到了城市和行业,如今,不谈云,你就已经是"Out Man"了. 因此,当我们看到身边的某项应用突然间被冠以"云"的标签,心中不由的会出现这样的疑问:这就是云吗?在这其中,非常典型的一类代表就是网络存储,也就是我们俗称的"网盘". 网络硬盘的兴起以及向云存储的转化 实际上,网络硬盘对于我们并不

2013中国云存储论坛即将召开

论坛主题:深入推进云计算应用与成员单位间协作 1.高校如何利用http://www.aliyun.com/zixun/aggregation/13422.html">云计算技术,如何开展云计算教学 2.物联网.大数据与云计算的热点问题 3.云计算开源系统与产品现场演示与体验 4.云计算应用案例剖析 5.1157.html">江苏省云计算论坛专家委员会成员和单位会员的调整.增补与颁证 时    间:2013年7月14日至15日 地    点:科教城天润科技大厦第一会议室 会议

云存储产品趋同 高速传输是电信级云存储优势

云计算和云存储是未来IT发展的必然趋势,不仅用户需求旺盛,而且市场空间巨大.在国内,已经有很多企业开始构建基于云计算的存储服务.在这一轮竞争中,电信运营商应如何定位和发展,并根据市场需要与自身的优势推出产品,是非常值得研究的问题. 因此有必要通过系统研究,为电信级云存储产品描绘一张清晰的发展全景图,提出云存储产品发展思路与产品策略.本文将分析云存储市场现状和发展潜力与空间,对谷歌.苹果.新浪.腾讯等云存储标杆企业案例进行深入剖析:并综合市场竞争现状与用户需求,分析电信在当前竞争态势下进军云存储市

低功耗高可靠云存储技术让摩尔定律得以维持

低功耗高可靠云存储技术让摩尔定律得以维持(刘鹏教授  第三届中国云计算大会 ) 刘鹏教授指出计算机的发展速度是遵从摩尔定律,但是显然不及数据的增长速度,而由摩尔定律得知每隔一年半CPU的速度才会增长,所以我们用网络连接大量的计算机构成一个虚拟的超级计算机,从而获得计算和储存能力.而云的判断可以基于以下三点:1 用户的使用的计算资源不在客户端而是在云端2 服务能力要具有分钟级可动态伸缩的能力3 云计算可以提高5倍以上的性价比在第三点中,刘鹏教授指出在Google(2011),这一性价比已经达到40

Win8系统无缝整合SkyDrive 自由畅享云存储

微软SkyDrive是面向个人应用的云存储服务,我们用微软帐号登录之后即可在微软提供的云端服务器里上传.存储.编辑.管理和下载照片.视频.文本等各种文档资料,并且可以与朋友共享文件.和同事协作完成文档--如今,跨平台操作系统Windows 8系统无缝整合不断优化的SkyDrive应用,我们可以更加方便地使用桌面电脑.超极本.平板电脑以及手机等设备轻松流畅地随时随地享受个人云存储服务,无论身在何处,都可以通过多种设备获取需要的文件. Skydrive 用自己的微软帐户登录Windows 8系统,点

RAMCloud:内存云存储的内存分配机制

现在全闪存阵列已经见怪不怪了,EMC的XtremIO,还有VNX- F(Rockies),IBM FlashSystem.全闪存真正为效率而生,重新定义存储速度.凭借极致性能,高可用性,为您极大提高企业级应用效率.提到闪存的优势,那么毋庸置疑的就是速度!而在速度优势背后,SSD则面临着价格.容量以及寿命等方面的限制. 当然随着技术的发展,成本的下降,SSD有可能会取代机械硬盘,成为下一代企业存储的主要介质.机械硬盘可能转变为磁带的角色. 但是,闪存速度的确就是现在存储系统的极限吗?现在有需要基于