云存储为用户提供服务形式同时提供更强的存储和计算功能

云存储(cloud storage)这个概念一经提出,就得到了众多厂商的支持和关注。Amazon在两年前就推出的Elastic Compute Cloud(EC2:弹性计算云)云存储产品,旨在为用户提供互联网服务形式同时提供更强的存储和计算功能。内容分发网络服务提供商CDNetworks和业界著名的云存储平台服务商 Nirvanix发布了一项新的合作,并宣布结成战略伙伴关系,以提供业界目前唯一的云存储和内容传送服务集成平台。半年以前,微软就已经推出了提供网络移动硬盘服务的Windows Live SkyDrive Beta测试版。近期,EMC宣布加入 道里可信基础架构项目,致力于云计算环境下关于信任和可靠度保证的全球研究协作,IBM也将云计算标准作为全球备份中心的3亿美元扩展方案的一部分。

 云存储变得越来越热,大家众说纷”云”,而且各有各的说法,各有各的观点,那么到底什么是云存储?

  1、什么是云存储

  云存储在云计算 (cloud computing)概念上延伸和发展出来的一个新的概念。云计算是是分布式处理(Distributed Computing)、并行处理(Parallel Computing)和网格计算(Grid Computing)的发展,是透过网络将庞大的计算处理程序自动分拆成无数个较小的子程序,再交由多部服务器所组成的庞大系统经计算分析之后将处理结果回传给用户。通过云计算技术,网络服务提供者可以在数秒之内,处理数以千万计甚至亿计的信息,达到和”超级计算机”同样强大的网络服务。

  云存储的概念与云计算类似,它是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。

  如果这样解释还是难以理解,那我们可以借用广域网和互联网的结构来解释云存储。

  云状的网络结构

  相信大家对局域网、广域网和互联网都已经非常了解了。在常见的局域网系统中,我们为了能更好地使用局域网,一般来讲,使用者需要非常清楚地知道网络中每一个软硬件的型号和配置,比如采用什么型号交换机,有多少个端口,采用了什么路由器和防火墙,分别是如何设置的。系统中有多少个服务器,分别安装了什么操作系统和软件。各设备之间采用什么类型的连接线缆,分配了什么 xml:lang=IP地址和子网掩码。

  但当我们使用广域网和互联网时,我们只需要知道是什么样的接入网和用户名、密码就可以连接到广域网和互联网,并不需要知道广域网和互联网中到底有多少台交换机、路由器、防火墙和服务器,不需要知道数据是通过什么样的路由到达我们的电脑,也不需要知道网络中的服务器分别安装了什么软件,更不需要知道网络中各设备之间采用了什么样的连接线缆和端口。

  虽然这个云图中包含了许许多多的交换机、路由器、防火墙和服务器,但对具体的广域网、互联网用户来讲,这些都是不需要知道的。这个云状图形代表的是广域网和互联网带给大家的互联互通的网络服务,无论我们在任何地方,都可以通过一个网络接入线缆和一个用户、密码,就可以接入广域网和互联网,享受网络带给我们的服务。

  参考云状的网络结构,创建一个新型的云状结构的存储系统系统,这个存储系统由多个存储设备组成,通过集群功能、分布式文件系统或类似网格计算等功能联合起来协同工作,并通过一定的应用软件或应用接口,对用户提供一定类型的存储服务和访问服务。

  当我们使用某一个独立的存储设备时,我们必须非常清楚这个存储设备是什么型号,什么接口和传输协议,必须清楚地知道存储系统中有多少块磁盘,分别是什么型号、多大容量,必须清楚存储设备和服务器之间采用什么样的连接线缆。为了保证数据安全和业务的连续性,我们还需要建立相应的数据备份系统和容灾系统。除此之外,对存储设备进行定期地状态监控、维护、软硬件更新和升级也是必须的。

  如果采用云存储,那么上面所提到的一切对使用者来讲都不需要了。云状存储系统中的所有设备对使用者来讲都是完全透明的,任何地方的任何一个经过授权的使用者都可以通过一根接入线缆与云存储连接,对云存储进行数据访问。

  云存储不是存储,而是服务

  就如同云状的广域网和互联网一样,云存储对使用者来讲,不是指某一个具体的设备,而是指一个由许许多多个存储设备和服务器所构成的集合体。使用者使用云存储,并不是使用某一个存储设备,而是使用整个云存储系统带来的一种数据访问服务。所以严格来讲,云存储不是存储,而是一种服务。

  云存储的核心是应用软件与存储设备相结合,通过应用软件来实现存储设备向存储服务的转变。

  2、云存储的结构模型

  与传统的存储设备相比,云存储不仅仅是一个硬件,而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的复杂系统。各部分以存储设备为核心,通过应用软件来对外提供数据存储和业务访问服务。云存储系统的结构模型如下:

 一、存储层

  存储层是云存储最基础的部分。存储设备可以是FC光纤通道存储设备,可以是NAS和 iSCSI等IP存储设备,也可以是 SCSI或SAS等 DAS存储设备。云存储中的存储设备往往数量庞大且分布多不同地域,彼此之间通过广域网、互联网或者 FC光纤通道网络连接在一起。

  存储设备之上是一个统一存储设备管理系统,可以实现存储设备的逻辑虚拟化管理、多链路冗余管理,以及硬件设备的状态监控和故障维护。

  二、基础管理层:

  基础管理层是云存储最核心的部分,也是云存储中最难以实现的部分。基础管理层通过集群、分布式文件系统和网格计算等技术,实现云存储中多个存储设备之间的协同工作,使多个的存储设备可以对外提供同一种服务,并提供更大更强更好的数据访问性能。

  CDN内容分发系统、数据加密技术保证云存储中的数据不会被未授权的用户所访问,同时,通过各种数据备份和容灾技术和措施可以保证云存储中的数据不会丢失,保证云存储自身的安全和稳定。

  三、应用接口层:

  应用接口层是云存储最灵活多变的部分。不同的云存储运营单位可以根据实际业务类型,开发不同的应用服务接口,提供不同的应用服务。比如视频监控应用平台、IPTV和视频点播应用平台、网络硬盘引用平台,远程数据备份应用平台等。

  四、访问层:

  任何一个授权用户都可以通过标准的公用应用接口来登录云存储系统,享受云存储服务。云存储运营单位不同,云存储提供的访问类型和访问手段也不同。

  3、云存储的技术前提

  从上面的云存储结构模型可知,云存储系统是一个多设备、多应用、多服务协同工作的集合体,它的实现要以多种技术的发展为前提。

  一、宽带网络的发展

  真正的云存储系统将会是一个多区域分布、遍布全国、甚至于遍布全球的庞大公用系统,使用者需要通过ADSL、DDN等宽带接入设备来连接云存储,而不是通过FC、 SCSI或以太网线缆直接连接一台独立的、私有的存储设备上。只有宽带网络得到充足的发展,使用者才有可能获得足够大的数据传输带宽,实现大量容量数据的传输,真正享受到云存储服务,否则只能是空谈。

  二、 WEB2.0技术

  Web2.0 技术的核心是分享。只有通过web2.0技术,云存储的使用者才有可能通过 PC、手机、移动多媒体等多种设备,实现数据、文档、图片和视音频等内容的集中存储和资料共享。Web2.0技术的发展使得使用者的应用方式和可得服务更加灵活和多样。

  三、应用存储的发展

  云存储不仅仅是存储,更多的是应用。应用存储是一种在存储设备中集成了应用软件功能的存储设备,它不仅具有数据存储功能,还具有应用软件功能,可以看作是服务器和存储设备的集合体。应用存储技术的发展可以大量减少云存储中服务器的数量,从而降低系统建设成本,减少系统中由服务器造成单点故障和性能瓶颈,减少数据传输环节,提供系统性能和效率,保证整个系统的高效稳定运行。

  四、集群技术、网格技术和分布式文件系统

  云存储系统是一个多存储设备、多应用、多服务协同工作的集合体,任何一个单点的存储系统都不是云存储。

  既然是由多个存储设备构成的,不同存储设备之间就需要通过集群技术、分布式文件系统和网格计算等技术,实现多个存储设备之间的协同工作,使多个的存储设备可以对外提供同一种服务,并提供更大更强更好的数据访问性能。如果没有这些技术的存在,云存储就不可能真正实现,所谓的云存储只能是一个一个的独立系统,不能形成云状结构。

  五、 CDN内容分发、P2P技术、数据压缩技术、重复数据删除技术、数据加密技术

  CDN内容分发系统、数据加密技术保证云存储中的数据不会被未授权的用户所访问,同时,通过各种数据备份和容灾技术保证云存储中的数据不会丢失,保证云存储自身的安全和稳定。如果云存储中的数据安全得不到保证,想来也没有人敢用云存储,否则,保存的数据不是很快丢失了,就是全国人民都知道了。

  六、存储虚拟化技术、存储网络化管理技术

  云存储中的存储设备数量庞大且分布在多不同地域,如何实现不同厂商、不同型号甚至于不同类型(如FC存储和 IP存储)的多台设备之间的逻辑卷管理、存储虚拟化管理和多链路冗余管理将会是一个巨大的难题,这个问题得不到解决,存储设备就会是整个云存储系统的性能瓶颈,结构上也无法形成一个整体,而且还会带来后期容量和性能扩展难等问题。

  云存储中的存储设备数量庞大、分布地域广造成的另外一个问题就是存储设备运营管理问题。虽然这些问题对云存储的使用者来讲根本不需要关心,但对于云存储的运营单位来讲,却必须要通过切实可行和有效的手段来解决集中管理难、状态监控难、故障维护难、人力成本高等问题。因此,云存储必须要具有一个高效的类似与网络管理软件一样的集中管理平台,可实现云存储系统中设有存储设备、服务器和网络设备的集中管理和状态监控。

时间: 2024-09-19 19:25:46

云存储为用户提供服务形式同时提供更强的存储和计算功能的相关文章

高速计算+海量存储 浪潮服务器让中国“看得更清”

由近两百台浪潮双路服务器NF5270M4搭建成的集群存储系统,为高分卫星地面数据处理系统提供约100GB/s的数据吞吐和1660Gb/s的网络传输能力,为"高分专项"前端卫星业务提供强有力的数据处理能力支撑,有效的提升了我国全球数据及时获取.接收和处理的能力,实现了对中国及周边地区多尺度.近实时的高分辨率观测能力.   浪潮服务器NF5270M4支撑高分专项地面数据处理系统 卫星那些事儿,离你并不远 发射卫星,跟百姓生活有什么关系吗?我们经常能听到这样的疑问.在许多人看来,航天技术高高

2012年到目前为止已经有超过5亿云存储新用户完成注册

个人云存储用户规模正在不断扩大.市场调研公司HISiSuppli提供的数据显示,2012年到目前为止已经有超过5亿云存储新用户完成注册,预计2013年云存储新注册用户数将达到6.25亿,增幅达到25%.而在2011年,这一全年数据仅为3亿. 在巨大商机的吸引下,时下各大厂商竞逐云浪潮,市场混战不断升级,个人云存储或成大势所趋.但个人云储存市场还存在不少瓶颈待突破,尤其是目前云服务尚处概念导入期,安全问题不容忽视. 用户数增幅或达25%,云存储规模不断扩大 计算机领域正在发生一场变革,互联网让人们

阿里云数据库,破解大型网站架构设计中的数据存储难题

摘要:3月10日,2017阿里云网站行业热点问题和解决方案线下研讨会在上海举行.在本次研讨会上,阿里云数据库团队产品专家王义成(花名挚尤)针对于大型网站的数据库架构设计以及阿里云ApsaraDB所提供的服务管理和解决方案进行了深入介绍. 分享者简介:王义成(花名挚尤),阿里云数据库团队产品专家,负责阿里云NoSQL数据库的产品规划.加入阿里巴巴近5年的时间,参与过多种云数据库的产品设计工作.目前主要负责阿里云的MongoDB.Redis以及MemCache产品,旨在为广大客户提供安全可靠的数据库

“云”商机无限,运营商可提供哪些商业模式?

据IHS iSuppli公司无线系统服务的研究,能够利用"云"这种新兴的热门计算与存储技术的无线服务提供商,尤其是其中能够利用其重要的网络资产的公司,将迎来巨大商机. 随着谷歌.亚马逊和戴尔等知名企业推出自己的云计算产品与服务,厂商对于云计算的热情高涨.苹果在8月1日宣布了万众期待的iCloud服务的价格,在云计算领域掀起新的热潮.iCloud服务将于今年秋季推出,将允许客户在iPad.iPhone和Mac电脑等苹果设备上同步及共享音乐.照片和图书.九天后,亚马逊宣布了其Kindle云

IBM推出全新大型主机z13s 为混合云环境提供更领先安全能力

2016年2月16日,IBM宣布推出针对混合云环境设计和优化的全新大型主机z13s,凭借更为领先的关键信息及业务处理安全性,帮助中型企业在保证系统性能的前提下确保数据加密安全.此外,IBM还宣布了z13s多个高集成的创新特性及其在安全领域的全新合作. 硬件内置安全性:全新z13s硬件内置领先的加密特性,交付两倍于前代产品的数据加密和解密速度,在不影响性能的情况下实现信息保护. 智能化安全能力:通过整合大型主机和IBM Security软件解决方案,IBM为混合云基础架构提供了更为安全的支持.此外

云管理平台为混合IT应用提供统一的方法

虽然更多的云平台可能意味着更多的挑战,但是正确合适的管理平台将使管理员的工作变得更为容易.但是,市场上有如此多的管理平台软件可供选择,那么我们该如何知道应选择哪一个呢? 对于最终决定将数据迁离本地的企业来说,云可能是压倒一切的最终选择.市场上有着如此众多可供选择的云供应商.服务产品以及定价结构,但并不是每一家企业都能找到一个万能的解决方案. 随着不断发展的合规性标准和工作负载需求,企业用户可以看到来自于不同供应商的混合云或多云平台中所寓含的价值.但是一个混合云模式会带来与治理.合规性和性能相关的

盛大云称注册用户已超三万

盛大云注册用户超过三万 新浪科技讯 4月24日下午消息,来自盛大云(grandcloud.cn)方面的数据透露,截至目前其注册用户数已经超过三万.这也是盛大云首次对外公布该项运营数据.今年3月,盛大云悄然取消原有的邀请码限制,正式投入开放运营之中. 去年初,盛大创新院成立云计算主题院,介入云计算业务的发展.随后这一业务改组成立为盛大云,于去年7月进行公测.并于今年3月开放运营. 根据此前的官方介绍,盛大云平台将提供更基础.更底层的云服务,旨在打造一个为中国企业提供公有云服务的平台.模式上与亚马逊

Riverbed推出SteelFusion新型云及虚拟方案 为软件定义边缘部署提供更大灵活性

应用性能公司Riverbed日前宣布推出RiverbedSteelFusion新型云及虚拟部署方案,为客户提供更多选择和灵活性.SteelFusion是领先的软件定义边缘解决方案,帮助企业集中管理分散于远程办公室及分支机构的IT基础设施.同时集中管理数据中心.云或混合环境的运营工作.从而优化管理.提高安全性和灵活性并获得更高的成本效益. 新型云及虚拟部署方案包括: 用于IBM云的SteelFusion,这是一种基础设施即服务(IaaS)云平台,是专为企业提供的裸机云基础设施.此外,SteelFu

携手英特尔,百度开放云将提供更强悍云服务

2016年4月1日,英特尔公司宣布推出多款致力于简化云计算部署和应用的创新产品,包括基于英特尔领先的14纳米制程技术的英特尔至强处理器E5-2600 v4产品家族以及两款采用NVMe*协议的英特尔数据中心固态盘P3320/P3520与D3700/D3600产品系列,旨在从计算.存储上实现更高的性能.灵活性和可用性,为云计算.技术计算.企业应用.存储以及网络等领域提供为软件定义优化的数据中心基础设施,帮助企业用户更快地运用云计算带来的优势,加速业务转型和基于云的服务的创新. 现场,来自百度开放云副