存储初创企业Versity公司提供S3对象存储接口

大量数字化处理对象。

Versity公司是一家采用多线程SAM-QFS的归档软件初创企业。

这家年轻的公司成立于2011年3月,CEO Bruce Gilpin拥有风险投资背景,而CTO则为Harriet Coverston。她自1986年起即在LSC(即Large Storage Configurations)公司工作并担任技术负责人职务,而该公司正是QFS(即快速文件系统)的开发方。

QFS能够对磁盘驱动器进行分组,并为其提供一套文件系统。该软件后被Sun公司收购,Coverston亦在工作一段时间后随甲骨文收购Sun而转投数据库巨头旗下。

在Sun公司中,QFS与存储及归档管理器(简称SAM)配合使用,后者负责管理磁盘与磁带等批量存储资源,而SAM-QFS即由此而生。Sun公司于2008年3月将其纳入OpenSolaris项目。这是一款层级化存储管理产品(简称HSM),能够将冷门文件由前端磁盘复制至磁带(IBM、LTO与甲骨文格式),整个过程以后台方式运行并可根据需要随时恢复至磁盘内。

甲骨文公司目前的Hierarchical Storage Manager正是基于SAM-QFS。

Versity公司为自筹资金所建立,并在其后的两年中一直以节俭与延迟结款方式进行运作,直到2013年7月获得来自克雷公司的A轮资助。克雷公司为其高性能计算市场上的一家分销合作伙伴。2014年4月,Versity存储管理器(简称VSM)软件产品正式发布。

该软件已经拥有10到20家客户,其中包括利用其管理250 PB数据的Ovation Data公司。另外,去年Versity公司签下了一份总额达100万美元的订单。

Gilpin在采访时指出,VSM是一款开源软件,用户以订阅方式加以使用。具体来讲,VSM属于专有开源产品,其以合法方式使用SAM-QFS源代码,并由Versity方面基于CDDL进行授权。

其架构特性包括:

• 专门构建的归档文件系统提供业界领先的性能表现。

• 基于策略的数据管理应用提供自动化存储分层,从而实现持续存储优化效果。

• 基于开源SAM-QFS的技术方案目前已经在为全球范围内的数百座客户站点服务。

• 写入为open tar文件格式以降低供应商依赖性。

• <Li<Standard POSIX文件系统能够支持更为广泛的应用类型。

软件的运行速度据称亦相当出色:

• Tunable系统参数调整可面向任意应用、网络类型或者存储技术起效。

• 以接近存储硬件原始速度的水平实现文件归档移动。

• 元数据可进行拆分存储以提升吞吐能力,或者根据环境内事务处理情况进行穿插存储。

• 可变DAU(即磁盘分配单元)机制拥有出色的大型与小型文件处理性能,且可调整以支持多种不同工作负载。

VSM并非对象存储方案,亦不属于并行文件系统。具体来讲,这是一套适用于那些不希望面向对象API进行写入,但又需要保留自身现有POSIX接口的企业客户的归档存储方案。

发展

Versity公司正着手为其后端存储发布S3接口,旨在将其作为公有云或者内部S3所能使用的对象存储机制。目前已经有一家客户选择这种使用方式,Gilpin表示其"硬件供应商正是内部对象存储厂商之一。"

为什么Versity公司要支持对象接口?该公司给出的答案是,"因为Web规模数据中心虽然已经建立起对象存储体系,但其余企业仍然在使用POSIX,而且二者之间无法往来迁移。"

Versity公司还在着手添加一套二级对象存储接口,旨在利用较S3更快速也更简单的方式将VSM与内部对象存储体系加以结合。根据我们掌握的情况,由此构建的系统在使用成本上仅为Amazon S3存储的三分之一。

我们猜测其后端对象存储供应商很可能是Cloudian公司。

多线程

多个文件被打包为单一TAR文件,即所谓流量重塑机制,其随后作为单一条目被写入至归档备份存储内。此TAR文件的大小可通过策略进行设置。

VSM随后会使用运行在一个或者多个处理器核心上的线程进行多线程IO。该软件的部分开发人员来自Lustre公司,且对并行文件系统拥有深刻理解。Gilpin就速度水平给出说明,表示VSM在使用5000美元戴尔服务器(配备双10 GbitE网卡)的情况下能够实现每秒1.8 GB的后端存储写入速度。其读取速度则为每秒2.1 GB。

这一水平与DataCore所使用的Parallel Server技术基本类似。

Gilpin指出,VSM的速度水平高于Avere文件管理器、对象存储与云访问加速产品。

向外扩展文件系统

Versity公司正在着手开发一套向外扩展POSIX文件系统,其可应对高达1万亿个文件。这套方案将匹配对象存储系统,而且已经拥有8个月的过往开发周期。该公司希望在今年10月推出这套文件系统的alpha演示版本。

这将是一套对等系统,其中不存在主节点,同时采用字节范围锁定与B树数据结构。

Gilpin指出,其专门针对归档需求所设计,而对字节范围内的POSIX加以忽略,意味着默认情况下不存在文件锁定。如果出现可能将其速度拖慢至NFS水平的资源竞争情况,元数据会得到优先处理。

而这将成为Versity公司的下一代产品。

Gilpin同时指出,Versity公司正在考量如何更好地从Lustre系统中提取文件,甚至直接支持Lustre文件格式。

竞争关系与评论意见

其竞争对手包括IBM(LTFS LE、TSM与HPSS)、甲骨文(SAM-QFS、甲骨文HSM)、SGI(DSM)以及昆腾(StorNext)。他表示,昆腾可能是其最为强劲的竞争对手,当然IBM与甲骨文则拥有更强大的销售渠道与客户基础。

SpectraLogic据称已经成为Versity公司的一位合作伙伴。

在我们看来,业务规模有限与来自克雷的投资并不能说明什么;必须承认,这是一家严肃的厂商,其拥有出色的归档方案,而且VSM的多线程速度也的确令人印象深刻。

其向外扩展发展思路也解决了各对象存储厂商在构建文件系统时始终存在的扩展能力有限这一问题。S3后端接口将使得VSM成为一套面向面向POSIX应用用户的对象存储网关,其它后续对象存储API的推出也将进一步强化这种能力。另外,向外扩展文件系统的开发显得颇具潜力,因此我们将期待着这家年轻的企业在4个月后会交出怎样一份实际答卷。

原文发布时间为:2016年6月24日

时间: 2024-11-02 20:48:30

存储初创企业Versity公司提供S3对象存储接口的相关文章

存储初创企业Versity公司S3对象存储接口

 大量数字化处理对象. Versity公司是一家采用多线程SAM-QFS的归档软件初创企业. 这家年轻的公司成立于2011年3月,CEO Bruce Gilpin拥有风险投资背景,而CTO则为Harriet Coverston.她自1986年起即在LSC(即Large Storage Configurations)公司工作并担任技术负责人职务,而该公司正是QFS(即快速文件系统)的开发方. QFS能够对磁盘驱动器进行分组,并为其提供一套文件系统.该软件后被Sun公司收购,Coverston亦在工

存储初创企业OpenIO力推ARM CPU与Kinetic驱动器

法国开源对象存储初创企业OpenIO公司正在大力宣扬其软件在基本存储机制之上的卓越效果,并表示其将优先选择Kinetic驱动器作为底层硬件. OpenIO公司于今年早些时候刚刚收得种子融资,并希望能够在未来几个月内进行A轮融资. 其它附加功能还包括视频转码.分析与保护(即擦除编码).OpenIO软件能够运行在数千节点之上并实现各节点间的负载均衡功能.而且该公司表示,数千个节点完全有可能在单一Kinetic驱动器之上实现运行. 这些驱动器通过以太网直接接入,采用键:值存储机制并可实现对数据的Get

三家存储初创企业面对厄运勇往直前,同时就裁员消息发起还击

Exagrid.owncloud与Simplivity三方均表示已经成功实现逆境发展 醒醒,闻闻咖啡的香气,苦难与绝望终将过去. 面对此前六家存储厂商进行裁员的状况,另外三家存储初创企业则表现得非常乐观.Exagrid.owncloud以及Simplivity目前均表示市场需要由其推出的出色产品.醒醒吧,各位竞争对手,对抗还未最终结束. Actifio.Atlantis.Coho Data.DataGravity.Panasas以及Tegile最近都进行了员工裁撤. 相比之下,Exagrid则迎

云存储初创企业Primary Data获5000万美元融资

11月6日消息,存储初创企业Primary Data刚刚获得了5000万美元的融资.该公司在盐湖城.硅谷及以色列均设有办公室,这些地方均是存储初创企业云集之处.另此轮融资由http://www.aliyun.com/zixun/aggregation/16337.html">Accel Partners领投,Battery Ventures和Pelion Venture Partners等跟投. Primary Data由David Flynn和Rick White联合创立,但是公司的运作

又一家存储初创企业横空出世:欢迎OSNEXUS

OSNEXUS是一家已经走过六年的初创企业,其主要开发QuantaStor软件定义存储方案--此方案立足于单一平台之内最高32个虚拟化节点之网格,面向ZFS.Ceph与Gluster并提供向外扩展之块.文件与对象存储资源池. OSNEXUS公司由CEO Steven Umbehocker建立于2010年,而且截至目前还没有披露过任何融资活动--根据我们的理解,这意味着其始终利用自筹资金进行运营. 我们已经对其进行了简要观察,但并没有与任何企业高管人员或者用户直接交流. 其软件方案以Ubuntu

旅游业需要更多初创企业,数据共享提供了绝佳机会

编者按:旅游业可能是世界上最大的产业之一,同时也是最有趣.分化最大的产业.Snapchat的联合创始人和首席商业官David Turnbull带我们分析,这个市场究竟为什么需要更多的创业公司. 世界旅游协会的数据显示,美国的旅游业占据了整个国家GDP的百分之十. 但是,旅游业对科技企业来说是一个很难开拓的领域,同时也是一个对初创企业很不友好的领域. 就像我们都知道的,创新往往来自于那些足够疯狂的企业,疯狂到要挑战现有的格局,去创造新的令人刺激的事情. 有很少的一批企业在这件事儿上面成功了. Ai

数据中心网络初创企业BigSwitch公司又获得新一轮融资

开放的网络软件厂商BigSwitch网络公司,试图拓展其数据中心网络产业市场规模,目前已获得另一轮巨大的风险投资. 该公司在第三轮融资中已经募集了4850万美元.在其最大的一些投资者中,其中包括科斯拉风险投资公司,红点风险投资公司,迈克尔·戴尔的MSD资本公司,以及总部上海的私募股权投资巨头CID集团和台湾硬件制造商智邦科技等.加上其最新一轮的融资,BigSwitch公司现在已经筹集了9400万美元. BigSwitch公司成立于2010年,是一家数据中心网络创业公司.近年来,该公司将自己定位可

干到底--三种存储类型比较-文件、块、对象存储

http://limu713.blog.163.com/blog/static/15086904201222024847744/ http://www.dostor.com/article/2012-12-27/7887715.shtml   块存储和文件存储是我们比较熟悉的两种主流的存储类型,而对象存储(Object-based Storage)是一种新的网络存储架构,基于对象存储技术的设备就是对象存储设备(Object-based Storage Device)简称OSD.        

甲骨文推出业界首款云融合存储 助力企业集成本地和Oracle云存储

 甲骨文推出业界首款云融合存储,开创了大型公有云提供商将自己的云服务与自己在企业本地部署的高性能NAS存储系统集成的先河.最新推出Oracle ZFS存储系统产品之一的Oracle ZFS云软件,可让企业便利.无缝地将数据或应用程序迁移至云端,在优化价值.节约成本的同时,无需外部云网关,且无需支付软件授权和云访问授权的费用,这意味着本地部署供应商从其基础架构平台访问公有云将无需支付"云接入税"(cloud entrance taxes),这使得甲骨文的总体拥有成本比业界某个竞争对手低了