IBM云对象存储特点简介及适用场景介绍

随着各行各业创新技术的诞生和更加细致的监管要求,比如互联网+,4K、8K的高清视频,金融领域的双录规定等等,非结构化数据形成了爆发的增长态势,而此刻我们传统的存储世界已经一片焦灼,SAN和NAS面面相觑,面对如此海量的数据存储,二者也束手无策,这时候对象存储挺身而出,以胸纳百川的气概,以动辄上PB级的存储身姿,喊出了"Yes, I can"的新时代承担。

根据IDC的报告指出,从2017年,结构化数据增长应趋于平缓,而在2016年开始,非结构化数据的增长将是爆发式的、火箭式的。而在2020年,全球的数据量将会突破45ZB(1ZB=1024EB),而其中80%的数据将是非结构化数据。

因此,传统存储在面对非结构化数据的时候,是心有余而力不足的,毕竟传统架构当时考虑的极限也仅限于百TB级。当新的对象存储技术出现的时候,一切的问题都变的迎刃而解。时间又要追溯到十几年前,当亚马逊发布了标准的S3对象存储接口API集后,对象存储有了相当长足的发展,直到现在呈现的多方态势,其中包括传统存储厂商的新产品线、新兴的创业公司、还有日益完善多远的开源技术。

首先,有一点需要明确的是,对象存储技术的出现,是革命者吗?是要替换推倒整个存储世界的吗?答案是否定的,对象存储是存储世界的新晋成员,但是现在大时代的背景下,也是不可割舍的、尤其重要的一部分,如果不积极接纳,转变思想,那么未来数据增长、管理、有效保存都会成为极其棘手的问题,同时,在大数据的背景下,数据丢失也是核心商业价值的丢失。传统的块存储,文件存储和后来者对象存储一起,缔造一个更为丰富、全面的存储世界。下图也给大家一个更为直观的角度,从文件数量、容量、是否结构化的角度来对待不同的存储类型。

其实,纵观整个存储的发展,直到现在三块主要的存储技术分而治之,共同构筑起存储分层的概念,这也是数据生命周期管理最重要的实现。存储分层有如下明显好处:

因此,数据的存储不在是静态的,扩容也不再是一个盒子一个盒子的堆叠,更是动态有生命的流动,也有对象存储技术保证了在盒子堆叠过程中的不稳定因素。

前面我们提到传统架构,最大的问题在于可扩展性的限制,那么我们从下图来见到看一下,对比两种类型存储的索引方式,就可以得出为什么我们说:"架构上的设计限制"。

左边是块/文件的读取方式,是通过目录树的方式,每一个文件需要有元数据去存储一个很长的字符串作为这个文件访问的路径,在文件系统访问方式下,首先,这样的路径长度是有限制的,这是由CIFS或NFS的文件系统所限制的;其次,如果要构建索引的话,需要深入到每一个细小的文件数末梢,当文件数量巨量时,实际上这种索引是无法构建的。

右边是对象存储的读取方式,首先每个对象实在完全平展的一个平面上,不再存在文件级、目录树的概念,所有多项都在一个层级,其次,对象的访问方式是通过唯一的一个对象ID来完成访问的,而这个ID是一个由系统定义,可设置位数的,字母大小写加上数字的字符串。一个16位的字符串即为(26+26+10)的16次方,已经足够涵盖所有的数据了。由于对象存储是采用RESTful API的方式访问,即HTTP的通信协议,因此需要访问一个对象的时候只需要主机IP+域名+对象ID即可,如https://hostIP/namespace/AABBCCDD。

说了那么多对象存储技术和领域的东西,只想让大家明白,这已经是潮流、是趋势、是最好保护您现有数据资产、发扬数据商业价值的最优技术和最佳实践。那么IBM云对象存储又有什么别致和出众的地方呢,在最新的Gartner报告中IBM云对象存储也是综合排名第一的,各分项也排名第一居多,本文主要会从五个方面给大家逐层分析。这五个方面包括强大的可扩展性、安全性、地理信息离散算法保障的9个9的可用可靠性、高效管理性和杰出的经济适用性。

首先,我们来说说IBM云对象存储的基本架构,总共由三个部件来实现整套系统系统的运作,其中管理节点负责系统的配置、告警、报警、性能监控等;访问节点负责对象文件的读写、纠删码算法、加密等;存储节点则是最终切片数据落盘所保存的地方,同时还有一项非常智能高级的工作,就是在磁盘或者节点出现故障的时候能够自动智能的恢复数据。这是一套非常强大的对象存储系统,能够真正意义上做到"软件定义,硬件感知",能够快速、简易的部署在通用的X86服务器上,同时,系统的监控能够深入到每块磁盘的I/O级别,这是相当了不起的一种软硬件兼容性,并可以手动将告警硬盘踢出正常系统。

通过上面IBM云对象存储的介绍,相信各位已经非常热血沸腾了吧,接着大家可能会问,IBM云对象存储有哪些部署形式?以及不同行业又将如何应用呢?这篇文章只是给各位读者一个抛砖引玉、启发思路的作用,毕竟每位客户、不同行业都有自己独特的属性,所遇到的问题和需要的解决方案也都会各有不同,IBM坚信只有聚焦客户,解决客户痛点才能够很好的实现双方商业成功。

IBM云对象存储实际上是业界唯一一家可以做到打通所有部署形式的一家提供商,其中包括On-Premise企业自建的方式,Dedicated私有云/专属云,Public公有云,Hybrid混合云等等方式,任君选择。更好的解决应对客户的业务痛点,共同创造商业价值。

而在应用方面,分成两个维度,一个是通用场景方面,一个是行业上聚焦的前三场景。

通用场景方面,如果按容量大中小来看,大型的主要在内容仓储和大数据归档这块,而中容量的则在企业协同、OA协同等,相对来说小容量的则在备份归档这块了。这只是一个指导性划分,实际上每个客户环境都有很大区别,用例也各不相同。

而在行业的划分,如下图

至于更加细分的医疗、教育、军工、公安、交通等等行业,实际上IBM云对象存储也有很多实践的经验,比如在基因测序的结果数据归档,在军工企业设计文档的协同工作,公安、交通的安防摄像头数据归档和在线的调用,都有很好的使用案例,等待和您的一起讨论。

最后,此文写到这里,仅仅只是打开了对象存储话题的讨论而已,同时对于IBM云对象存储的介绍也只是最简单的架构、基本实现机制等,至于应用的讨论,实际上是IBM目前在整个行业植根以来和客户共同研讨探究出来的一些领域和方向。也希望大家通过此文之后对于对象存储这样一个全新的技术有所了解。IBM与您携手共进,共同面对即将来临的海量非结构化数据浪潮。

原文发布时间为:2016年9月1日

本文作者:郑晓曦

时间: 2024-09-20 05:35:23

IBM云对象存储特点简介及适用场景介绍的相关文章

IBM云对象存储Cleversafe 大力拓展全新战场

在IT领域,企业收购的案例比比皆是.很多大型的企业在自己擅长的领域已经发展的十分成熟,然后通过收购相近或不足的产品线来完善自己的生态圈,扩大横向产品线,以带动企业向纵深发展. IBM,作为一家在业界极具影响力的企业,于2015年年底狠砸重金收购私有云计算公司Cleversafe,成立IBM云对象存储部门.Cleversafe所开发的数据存储软件,能够在公共和私有云计算系统中使用.而此次IBM下血本也正是看中了Cleversafe在对象存储领域的实力. 近日,2016 IBM Cleversafe

云对象存储:让大数据挑战变小

云提供商已经意识到云对象存储服务是将"大数据"市场炒作变成现金的有力途径.大数据分析从非结构化数据中提取情报,对于大多数云提供商提供的传统的块存储技术来说过于笨拙. 很多企业客户疲于调整现有的内部IT基础架构和传统数据仓库,云提供商正好找到了基于通过云对象存储服务,提供商不仅提供了成本削减,也解决了客户和大数据管理的相关技术挑战. 云对象存储:让非结构化数据结构化 收集和存储大型数据集对于任何规模的企业都让人生畏,而且访问.组织和分析非结构化数据给企业制造了大量新的挑战.使用块存储技术

新增HTTPS协议加密功能 美团云对象存储安全再升级

随着移动互联的发展,用户生活获得更便利的同时,数据安全问题也频频出现.此前,知名电商.社交网络平台的用户个人隐私泄露事件,就已为信息安全敲响了警钟.在网络信息安全问题上,数据传输的重要性不言而喻.近日,美团云对象存储新增HTTPS加密功能,为云端数据传输安全保驾护航. HTTPS的"S"强在哪儿 HTTP协议作为网络通信传输基础长达20多年之久,而如今要逐步让位于更安全可靠的HTTPS协议.只是一个字母"S"之差,后者为用户带来的安全可信性,却是传统的HTTP协议无

应用华云对象存储服务实现网站存储的平滑迁移实践

网站的图片资源访问速度慢?网站存储服务需要扩容?网站的后端存储运维成本高?网站数据丢失?是时候把网站的存储迁移到云上了! 华云将为你提供一套靠谱的网站存储上云方案,你可以不费吹灰之力.不停一秒服务就将网站的后端存储平滑迁移到华云对象存储之上,进而享受诸如弹性扩容.CDN加速.富媒体处理.防盗链等一系列优质服务. 概念介绍: 为了理解如何实现平滑迁移,首先让我们学习几个基本概念: 1. 华云对象存储(COS:ChinaC Object Storage) -- 提供高可用.高可靠.高可扩展的对象存储

阿里云对象存储服务OSS 学习笔记

阿里云对象存储服务(Object Storage Service,简称 OSS),是阿里云提供的海量.安全.低成本.高可靠的云存储服务 OSS服务先使用后付费 可以使用阿里云提供的API/SDK接口或者OSS迁移工具轻松地将海量数据移入或移出阿里云OSS.阿里云OSS服务的三种类型:1.标准类型(Standard):移动应用.大型网站.图片分享或热点音视频的主要存储方式2.低频访问类型(Infrequent Access):成本更低.存储期限更长3.归档类型(Archive):不经常访问数据的备

WordPress和阿里云对象存储OSS配置教程

传统情况下,网站源码以及数据库.图片等资源都是存储在一个服务器上的.这样的配置会存在这样的尴尬问题:当网站数据越来越多的时候,就面临着存储空间不够用.升级服务器配置.访问出现卡顿等情况.而解决此问题的最好方法就是将网站.数据库以及图片等资源分开管理,存储在不同的服务器上,这样使用时只需要在主服务器上调用即可.浪子虎博客使用的就是阿里云的OSS存储服务.下面,就随着浪子虎的脚步踏入WordPress博客使用阿里云OSS存储资源的步伐吧. 1. 安装WordPress 当然,如果你连WordPres

阿里云对象存储OSS————跨域资源共享(CORS)(m3u8 无法加载m3u8:跨域访问被拒绝)

今天在做视频直播录像的时候,添加一个录制APP的.M3U8文件到OSS的一个test文件中存储,结果是访问不到了: 提示:无法加载m3u8:跨域访问被拒绝!!!!! 项目代码测试地址:https://github.com/Tinywan/ThinkPhpStudy 阿里云帮助文档:https://help.aliyun.com/document_detail/31928.html

主流对象存储供应商产品差异对比

我们在第一部分<三大主流对象存储供应商及产品介绍>中介绍了三家主流的对象存储供应商情况,包括Caringo,DataDirect Networks和Dell EMC.本文介绍更多主流对象存储供应商及产品. Hitachi Data Systems HDS Hitachi内容平台(HCP)是一种通用对象存储系统,可使IT组织和云服务提供商从单个系统中存储.共享.同步.保护.保存.分析和检索文件数据.本地支持访问协议,包括NFS,CIFS,Amazon S3,REST,HTTP,HTTPS,Web

为对象存储而生,软件定义存储Cleversafe牛在哪里?

随着互联网的快速发展,大数据分析已经成为当下热词.银行每天产生各种扫描件.声音.图像:互联网和多媒体企业产生音频视频HTML文档:医院在信息化改革后,也需要取读大量电子病例.档案等非结构化数据.EB级的海量数据对于企业来讲既是业务拓展与增长的金矿,却又给IT部门带来巨大压力,传统存储系统已然无法满足企业对非结构化数据爆炸式增长的存储需求,企业IT架构变革迫在眉睫. 对于管理海量非结构化数据,企业需要有真正的扩展能力,高可用性和易于管理的存储系统.对象存储应运而生. 今天各种创新技术的发展,推动了