凯翔:可以同时替代Nimble和Nutanix的存储

在企业级存储界,Nimble和Nutanix虽说比起EMC、IBM、NetApp来说是十足的新秀,但在国内的名气却一点也不小。而这背后的原因,在于有着软件定义存储越来越受到企业数据中心的重视。同样是初创,但有着完全国产化血统的凯翔科技,却将Nutanix和Nimble的合体作为自己的核心竞争力。


 Nimble + Nutanix等于什么?

也许,若不是软件定义存储开始成为企业存储的顶梁柱,Nimble和
Nutanix之类的公司依旧会籍籍无名。软件定义存储旨在倡导通过将存储设备的数据平面和控制平面解耦,让用户的存储控制策略可以无视下面具体的存储差异,通过软件将不同硬件提供存储空间建立统一的存储池,实现灵活的资源调用。显然,软件定义存储的践行思路非常好地迎合了云计算、大数据时代当下企业存储需求,也让Nimble和
Nutanix之类的公司可以有机会抢食传统存储巨头的饭碗。

推动软件定义存储的两个主要趋势是横向扩展和闪存。由于软件定义存储会提供统一的存储空间池,就需要存储性能的提升将会更多地依靠存储软件对硬件资源的更好优化,也意味着硬件存储空间的拓展与性能提升呈同比态势。而闪存的利用则是软件定义存储里通过介质特性改变存储架构的典型玩儿法,例如考虑用SeverSAN方案替代传统阵列方案、数据库加速等等,甚至HDD时代的在线压缩、重删等功能也可梦想照进现实。

Nimble和
Nutanix正是推动软件定义存储领域里的激进主义者。前者注重用户从传统存储架构向软件定义存储架构的过渡,不强求用户的冒进,如帮助用户实现在HDD+SSD的混合环境部署软件定义存储。毕竟,对有些企业来说一次性上马全项目的闪存环境成本上还是吃不消的。而Nutanix注重在数据中心领域的存储性能的现行拓展,并强调
“隐形数据中心”,即用户对于存储架构的调整优化无需感知。

在通往软件定义存储的大路上,Nimble干着路上的事儿,Nutanix做着到达终点的活儿。而这一切,凯翔科技就能全包了,也许算得上是国内第一家软件定义存储端(路上的事儿)到端(终点的活儿)服务商。

那么,凯翔有什么技术傍身?

横向扩展:虚拟机热迁算啥,容器的热迁移更不是事儿

虚拟机热迁移功能允许IT专业人员将运行中的虚拟机从一台主机迁移到另一台主机,不再需要暂停时间。虽说三大主流供应商都提供了各自虚拟机热迁移功能,但彼此在过程上存在不小的差异。为此,凯翔提供了为异构环境搭建的统一的虚拟机的热迁移平台。

如果说异构平台的虚拟机热迁移技术已经不算新鲜,毕竟如华为、华三的国产化代表早已有大量案例。但容器的热迁移技术可是鲜见,即使在整个业界也是如此。据上海凯翔信息科技有限公司高级副总裁董晟介绍,凯翔同时提供了容器的热迁移技术。“容器原来是无状态的,接卷的话,就会产生网络上的一些问题,此前VMware或者OpenStack的热迁移也是主要解决类似问题,凯翔做了能够做自动热迁移容器的技术。”

SSD使用的优化

1、比磨损均衡更加智能高效的弹性纠删码

纠删码技术是继多副本之后出现的兼顾数据可靠性和节省存储空间的存储技术。传统的三副本技术需要一个文件同时又两个副本,若是做集群的冗余,副本还会更多,如此前TFS需要6个副本。这在大数据时代,显然是无法接受的。同时,闪存提供的远甚于HDD的快速存取也在推动传统存储方式的改变。

纠删码技术通过对提取一定数量的数据分块,计算校验产生校验块,并与原始数据块共同存储,即用N个原始数据块+K个校验块共同存储。在部分数据块或校验块丢失的情况下,可以通过计算恢复原始数据。如总数10块磁盘可以容忍4块磁盘损坏,系统仍然可用。虽说纠删码的特别之处在于容错率可设定,但却往往缺乏灵活的可变机制,

董晟介绍,凯翔的弹性纠删码技术有一些更灵活的地方。“当开始用全新盘阵的时候,K的值会比较小,随着读写次数的增多,我们会自动扩大K的值,从而可以把数据分散到更多的地方存储,从而更有效地保证SSD的使用寿命。”

听上去,这有点类似于闪存控制器提供的磨损均衡操作,但控制器是通过保留名单记录被移动的数据位置。显然,凯翔的弹性纠删码技术会比磨损均衡操作在提升闪存平均寿命上更加简单、高效。

2 、引用AVX指令集加速纠删码运算,纠删码落地变容易

纠删码技术虽说比多副本技术有着诸多优势,但推广起来却不易。纠删码技术在存储领域还较新,理论上可以达到的效果较好,但实际产品中还缺乏大量应用。例如,纠删码技术需要通过源数据块计算校验块,为此有着较大的计算负担。纠删码的实时编/解码运算对于服务器CPU来说将是一个比较大的占用,在分布式应用架构中,这意味着将影响应用本身的性能在解决这方面的问题时。纠删码在引出使用问题的同时,业界也有着两个比较大的突破方向。

一个是CAPI技术的引入。以往用于专用计算的协处理器都是以IO挂载的方式与CPU协同计算,由于无法与CPU共享内存,导致协处理器无法发挥本应强大的计算力。OpenPOWER联盟提供的CAPI技术很好地解决了这一问题。为此,很多厂商都投入到了CAPI+FPGA的加速卡设计中。通过CAPI技术,引入FPGA加强纠删码的计算能力成为可能。但是CAPI技术基于OpenPOWER处理器,,成本上对于纠删码的推广不利。


 另一个,就是利用x86架构下的AVX技术,凯翔正是这一领域的代表。AVX指令集的出现对于原有的X86指令集进行了优化与重新组合--这主要源于AVX指令集新的操作码编码方式。AVX指令集的编码方式叫做VEX(Vector

Extension),其主要用途是缩短指令长度,降低无谓的代码冗余,并且也降低了对解码器的压力,实现的方式也很特别--压缩各式各样的Prefix前缀,集中到一个比较固定的字段中,从而达到了精简指令集的目的。传统存储的功能由于相对简单,不需要x86的CPU,但在软件定义存储时代,Intel
CPU在存储端才有了更好的用武之地。


 另外,凯翔也将AVX指令集提供的计算加速优势用于可变长的在线数据重删。

3、独创的差额的计算编码,比纠删码更省时间,远程读盘者的福音

董晟介绍,考虑的远程用户的读取需求,现有纠删码措施还是有优化空间的,而这就是凯翔提供了独创的差额的计算编码方式。

“还有一个我们有自己的叫做差额的计算编码方式,能够减少很大程度的减少这个读取的时间。利用差额算法来算,无需像纠删码那样需要读取所有的数据,自然减少了大量时间。在一些场合的话,提高率30%-50%的性能都有可能的。”

4、为何要将HDD元数据迁移至SSD

毕竟,全闪存的门槛还是太高,否则Nimble也不会紧抓住混合存储的空间不放。随着时间的推移,新老存储巨头都有了混合存储的文章。但是,在HDD与SSD的使用上,无外乎两种,或是将SSD作为率先的热数据存储(比如DELL、HPE、华为),或是将SSD作为事后的热数据存储(比如同有)。其中,戴尔提供的在不同闪存间的流动存储更是在此基础上的微创新。或许,在混合存储上做冷热数据文章留给凯翔的机会已经不多了。


 但是,凯翔却率先实现了将HDD元数据迁移至SSD的混合存储的新型应用道路。这是怎样的一种创新呢?

上海凯翔信息科技有限公司CEO张涛介绍:“由于大家知道每次访问都是率先要访问元数据,但磁盘消耗时间比起SSD是有更大的消耗。由于元数据通常很小,为此,我们把它全部搬迁到SSD盘以后,通过在SSD上读取HDD上的元数据,可以明天提升HDD的读取性能。”另外,张涛介绍这项技术牵涉到了针对Linux内核的更改,“通过这样的优化以后,你就发现对于读BI、经营分析类这种小文件,有时候会提到50%以上。

举个例子,我们便不难发现这种创新的实际需求所在。例如,我们去图书馆借书,原有方式是在一个大的卡片架子上检索书目--在磁盘上读取元数据,然后再去找到所需要的书--在磁盘上取需要的数据。如今检索书目是在电脑上了--元数据迁移至SSD,找到所需要的书的过程依旧。显然,将HDD元数据迁移至SSD还是有其实际意义的。


 支持研发和测试环境 Docker和CloudFoundry

对于在研发和测试环境的应用,张涛介绍凯翔支持Docker和CloudFoundry的应用。作为开源领域的两大利器,凯翔将坚持二者的持续集成和持续发布。“例如容器,因为它本身有一个访问卷这一层的功能,我在卷这一层的功能来进行支持它。我们并不是去比较深入的改造它的CloudFoundry里面的代码,我们尽可能在他的接口层这一块来支持它,这样的话就是说将来它升级,对我的影响会很好。”

总结

软件定义存储存储的市场蛋糕正在越来越大,国际知名研究机构Wikibon2014年预测,十年后,全球企业级领域软件定义存储市场将达到400亿美金,未来十年复合增长率将达到41.5%当软件定义存储趋势已经不可逆,凯翔有幸成为了趋势的一部分。

软件定义存储的趋势不仅是国产化存储趁势崛起的一次很好契机,更是对自己创新方面的明确指导。放在应用场景下,我们还期待着凯翔在SDD上的优化、扩展性的支持、虚拟化发面的集成的更多努力,以及更多的落地。

本文转自d1net(转载)

时间: 2024-11-05 22:52:46

凯翔:可以同时替代Nimble和Nutanix的存储的相关文章

采众家之长 凯翔软件定义存储能够后来居上吗?

现在在存储圈里最受关注的莫过于软件定义存储技术,这是一种新的数据存储方式,最主要的形式是基于服务器的分布式存储,即Server SAN.所有存储相关的控制工作都仅在相对于物理存储硬件的外部软件中.并且这个软件不是作为存储设备中的固件,而是在一个服务器上或者作为操作系统和虚拟化的一部分.最早源于VMware的软件定义数据中心概念,如今已经自成一体,逐渐发展壮大. Server SAN的兴起削弱了EMC等传统存储厂商的优势,有利于没有任何历史包袱的新兴存储厂商.于是,在2013年时,软件定义存储开始

苗凯翔:大数据是计算和存储融合的产物

文章讲的是苗凯翔:大数据是计算和存储融合的产物,与国内相比,国外的云计算发展速度很快,已经进入了真正的部署和实施阶段,有很多的落地案例.而国内的云计算产业在发展过程中还存在一些瓶颈,应根据中国目前的结构形成一种比较合适的云存储发展环境,真正落地.真正部署大规模应用还有待于发展. 日前,在第十一届中国国际软交会上,英特尔数据中心软件部中国区首席技术官苗凯翔博士在接受采访时表示,大数据不仅靠存储还涉及到云计算,它是计算和存储融合的产物.他还表示,英特尔针对大数据市场需求提供了一整套软硬一体化解决方案

十五款可以替代谷歌GDrive的云存储服务

据国外媒体报道,谷歌凭借它的搜索引擎成为IT领域鼎鼎大名的企业,它的智能手机操作系统(Android)和社交网络(Buzz network.Google+)都在各个领域最富盛名,此前,谷歌发布了云存储服务GDrive,eWEEK 总结了十五款可以替代谷歌GDrive的云存储服务. 亚马逊CloudBerry 亚马逊CloudBerry 是云服务"先驱"创造的最早的消费者存储服务,CloudBerry在线备份可以经亚马逊S3服务测试过的备份和恢复程序. Dropbox Dropbox是一

软件定义存储之后,下一步考虑的是什么?

移动互联.云计算的高速发展,让数据呈现爆炸式增长.同时数据的价值也越来越重要.数据资产的重要性不断的提升对于存储系统的需求也越来越高.在此情况下,比传统存储更优秀的软件定义存储成为趋势,软件定义存储具有更高性能,更容易扩展.更稳定.更节能以及高安全的特质. 随着软件定义存储的成熟,各个厂商都在推出软件定义存储解决方案,而这些方案殊途同归核心都是更安全更稳定.更高性能更易扩展.那么怎么才能体现优势呢?那就是成本.凯翔科技是国内专业的软件定义存储厂商,在为用户提供软件定义存储服务的同时,不断思考用户

永凯APS对人员流动的风险控制

一.前 言 改革开放以来,以出口导向为主的劳动密集型 企业在我国东部沿海地区发展壮大,成为吸纳就业的主要部门,大量劳动力从中西部向东部沿海迁移,形成大规模"民工潮".凭借农村劳动力不断转移形成的"无限供给"劳动力资源,劳动密集型企业造就了以低单位劳动成本为核心的要素竞争优势,我国迅速发展成为全球制造业基地.然而由于社会.历史和自身等诸多因素的影响,企业内员工的工作价值观发生了很大变化,主观需求也日益多样化和复杂化,由此造成的人才大量流动与流失给公司带来了不可估量的损

DB2通过深度压缩进行存储优化:值压缩的替代行格式

本文档介绍了 DB2 Storage Optimization Feature 与 DB2® for Linux®, UNIX®, and Windows® 产品搭配使用的最佳实践.本文阐释了如何使此功能成为拓宽大型 OLTP http://www.aliyun.com/zixun/aggregation/13999.html">工作负载或数据仓库空间意识存储策略的关键驱动因素. 您可以使用 DB2 Storage Optimization Feature 对各类持久存储数据和临时数据进行

HPE为什么要收购产品线有重合的Nimble呢?

3月7日,本周二消息,HPE表示同意以大约10亿美金收购存储公司Nimble,消息一出Nimble股价暴涨45%,HPE估价也有涨幅,市场持积极态度. Nimble成立于2008年,于2013年上市,如今拥有约1300名员工,全球范围内有大约7500加客户,其中包括世界一千强企业. HPE为什么要收购Nimble呢? 在很多场景中,HPE都是Nimble的直接竞争者,可以说双方在产品定位上有许多重合,同样都有混闪和全闪存阵列产品,HPE的3Par也有全闪存和混闪,不过,考虑到HPE有许多存储产品

软件定义存储这么火,你如何从中分一杯羹?

2015年存储火了两件事情:一个是闪存,一个是软件定义存储(SDS).在互联网+转型的背景下,分布式系统 如日中天,而闪存和软件定义恰恰是分布式存储的基础,火上加火,SDS受追捧程度一发不可收拾,但这种热度更多集中在趋势上,那么理想会转为现实吗? 让理想转化为现实 未来是光明的,但道路是曲折的.如今,可以看到很多SDS解决方案.前不久,联想牵头成立了超融合产业联盟(顺便说一句,超融合就是一种SDS),可以看到很多SDS的厂商加盟,如Nutanix.华三.SMARTX.Maxta.深信服.华云网际

深入问答:云计算是否会对CIO造成影响?

被称为IT行业第三次革命的云计算,如今已经从炙手可热的概念慢慢发展成了实际应用.在2011年8-11月期间, ITValue社区联合英特尔公司,和数百位关注以及实践云计算的CIO们展开了深入的探讨,其中话题涉及到了云计算的商业价值.安全性.开放性.高效性.简单性等各个方面.今天小编就从ITValue社区进行的激烈讨论的帖子中挑选了十条问答,方便大家对云计算进行深入的了解. 1.CIO选择尝试云计算的动力是什么? 降低成本是CIO尝试云计算的最大动力.28%的CIO表示尝试云计算的动力是为了降低环