RAMCloud使未来数据中心无需硬盘

在当今的时代下,固态硬盘已成为企业中的热门技术。但斯坦福大学的计算机科学团队认为有更好的解决方案。他们已经想出了可扩展且高性能的存储方法,其被称为RAMCloud。这种解决方案可存储动态随机存储器中的所有数据。同时还可以聚合整个数据中心的内存资源。

RAMCloud的可扩展性和性能方面表现使它成为高性能计算的关键技术。特别是数据密集型的应用程序,而此技术在计算密集型的应用程序则表现一般。

RAMCloud项目由斯坦福大学教授John Ousterhout发起。同时他也是Tcl脚本语言的发明者。他还是Electric Cloud公司的董事长,Electric Cloud公司成立于2002年,其主要业务是提供高性能软件构件工具。Ousterhout在高性能计算领域进行了深入的研究,并对分布式文件系统和高性能文件系统有所研究。简而言之,RAMCloud是在数据中心或集群的大量服务器中汇集在内存中所有应用程序数据的软件平台。RAMCloud可提供比基于磁盘存储低100-1000倍延迟和比以往高100-1000倍的吞吐量。

研究人员相信目前的所依赖的硬盘技术将不足以应对数据密集型应用,这个趋势正在蔓延到企业计算的各个方面。研究人员还在文章中宣布如果RAMCloud成功,它将会取代磁盘从而作为数据中心主要的存储技术。

RAMCloud的两个最吸引人的特性是能够扩展到数以千计的服务器并能够保持极低的延迟。

RAMCloud的延迟可低至5-10微秒。这比传统磁盘快1000倍,比闪存要快5倍左右。研究人员表示RAMCloud的低延迟特性对于对低延迟有苛刻要求的Web的应用来说都有些显得性能过剩。但还是应该鼓励这种技术的发展,这会带来巨大的性能优势。同时对于一些高性能计算(HPC)应用,RAMCloud的低延迟特性则显得如鱼得水。

但网络延迟对RAMCloud低延迟优势的影响也是不可回避的问题。虽然像InfiniBand、Myrinet和Arista等高性能以太网厂商可实现跨数据中心10微秒延迟数据传输。但今天大多数设备采用的TCP/IP以太网的延迟达到了300-500微秒。网络延迟方面的优化是RAMCloud性能最大化的关键因素。

至于可扩展方面,研究人员认为使用当下的商用服务器和存储技术RAMCloud的规模可高达500TB。在未来5-10年RAMCloud的成本可能会降到每GB 5美元,并且规模可达到1-10PB。

图表代表三种存储技术在不同大小数据集和不同访问频率的成本(斯坦福大学计算机科学系绘制)

但在当今的市场,RAMCloud存储成本为每GB 60美元左右。DRAM系统的相对于磁盘和固态存储来说还是略显昂贵的。DRAM存储系统比传统的磁盘的价格贵50-100倍,比闪存贵5-10倍。但对于高吞吐量I/O应用DRAM还是能够体现其价值的。研究人员表示如果你的代码执行速度够快,你就可以突破存储数据访问的约束。从这个角度看DRAM其实比比传统硬盘价格低10-100倍。

这项技术也不可避免的面临一些问题,包括精确的数据模型和API、如何优化远程调用延迟、数据持久型和可用性、集群管理、多租户的应用、以及支持原子更新等技术还在摸索中。然而,这些都是可以解决的问题。

随着数据中心的扩展建设,未来将会浮现出越来越多的数据密集型应用。这为RAMCloud的普及奠定了基础。现在还没有一个RAMCloud项目变成商业产品的时间表。不过Ousterhout在Electric Cloud的经验可帮助RAMCloud尽快在商业领域中应用。

时间: 2024-10-11 16:04:45

RAMCloud使未来数据中心无需硬盘的相关文章

光子芯片开发获"隐形斗篷"相助:可使未来数据中心降低能耗

从<哈利·波特>的"隐形斗篷"到<星际迷航>的罗慕伦隐身战舰,这些一般只存在于科幻小说或电影中.美国科研人员最近利用这些隐形原理,为微光子集成器件设计了一个特定装置,其有助开发出较硅基芯片更小.更快.更节能的光子芯片. 未来的计算机.数据中心和移动设备将用光子芯片代替电子芯片.每块光子芯片中将包含数十亿个光子器件,与以硅基芯片中晶体管大致相同的方式执行特定功能.但问题是,如果其中两个光子器件过于靠近对方时将无法工作,因为两者之间的漏光会导致类似无线电干扰的串扰.

未来数据中心与云灾难恢复

未来数据中心是一个不断发展的概念.如果回溯到二战时期,理想的数据中心就是在一个大房间里安装一台庞大的大型计算机.未来数据中心是一个不断发展的概念.如果回溯到二战时期,理想的数据中心就是在一个大房间里安装一台庞大的大型计算机.几十年后,分布式计算促进了仓库式数据中心的发展.虚拟化使得服务器的大规模整合成为了可能,大大减少了数据中心内的物理服务器数量. 现在看来,人们正在进入一个简约的时代:数据中心的机架就像大卫.科波菲尔的魔术中的兰博基尼一样,在一阵烟雾中消失了.但这并不意味着IT硬件从数据中心消

揭秘:未来数据中心的六大优化趋势

随着数据中心的成本不断飙升,数据中心管理的重点开始转向优化数据中心基础设施.在未来几年,如下的一些新的趋势必将影响未来数据中心的决策: (一)数据中心的选址 一家数据中心的选址问题是一个相当重要的决定.因为现在的技术进步已经使得大多数任务可以进行远程操作,现场只需要有少量的工作人员需要即可,这就为数据中心的选址提供了广泛的地域选择.对这一决定有着相当影响的一些因素是: 选址地区的气候特点 每千瓦小时的最低费用 对环境的最小危害 降低生产成本 选址地区较低的人口稠密度 低建设成本 低劳动力成本 "

未来数据中心网络必需的三大件

短短几年间,很多人从不知道什么是SDN.Trill.VXlan,对这些技术不屑一顾,到现在几乎每个数据中心都在谋求转型,每个从事信息技术的人如果还不知道这些单词是什么就Out了,就像这年头还不用微信一样,跟不上主潮流了.当然这些新技术之所以被提出来,并得到很多人的响应和热捧,是因为随着应用的复杂化,人们信息需求不断增加,现有数据中心出现了不少自身无法解决的问题,必须要对现有数据中心进行优化或重建,尤其是数据中心网络要重建.在这样的背景下,催生了很多数据中心网络新技术,这里不乏有一些不切合实际的技

未来数据中心的选择:宽带多模光纤

多模光纤自上世纪80年代进入市场以来,经历了从OM1.OM2.OM3到OM4的演进.其中,OM3是针对垂直腔面发射激光(VCSEL)光源优化的多模光纤,有效模式带宽(EMB)达到2000MHZ.Km,支持100GBase-SR10距离达到100米,而OM4有效模式带宽(EMB)相比OM3提高了1倍多,达到4700MHZ.Km,然而支持100GBase-SR10距离仅有150米,相对于OM3光纤,100G以太网传输距离仅仅增加了50%,仍然无法满足未来网络的需求. 作为未来数据中心的选择,宽带多模

未来数据中心的选择:宽带多模光纤(WBMMF)

多模光纤自上世纪80年代进入市场以来,经历了从OM1.OM2.OM3到OM4的演进.其中,OM3是针对垂直腔面发射激光(VCSEL)光源优化的多模光纤,有效模式带宽(EMB)达到2000MHZ.Km,支持100GBase-SR10距离达到100米,而OM4有效模式带宽(EMB)相比OM3提高了1倍多,达到4700MHZ.Km,然而支持100GBase-SR10距离仅有150米,相对于OM3光纤,100G以太网传输距离仅仅增加了50%,仍然无法满足未来网络的需求. 作为未来数据中心的选择,宽带多模

未来数据中心网络三大武器: SDN、VDC、Overlay

当然这些新技术之所以被提出来,并得到很多人的响应和热捧,是因为随着应用的复杂化,人们信息需求不断增加,现有数据中心出现了不少自身无法解决的问题,必须要对现有数据中心进行优化或重建,尤其是数据中心网络要重建.在这样的背景下,催生了很多数据中心网络新技术,这里不乏有一些不切合实际的技术,也有不少只是实验室技术,根本无法实际应用,但是正是有了这些技术探索,逐渐抛弃了一些不合理的,再对合理的不断进行修改,到目前为止可以基本形成一套成熟理论,这套理论基本是未来数据中心网络的样子.未来的数据中心网络包括三大

NVMe:未来数据中心存储变革的代理

易失性快速存储器协议(NVMe)定义了一种通过PCIe总线访问固态硬盘驱动器(SSD)的新方法,并且预计在未来几年内将会呈指数级增长,与传统协议(如SATA协议)相比,其更高的性能和较低的延迟具有一定的优势. NVMe支持的存储基础设施不仅能够得到广泛的部署,而且目前正在进入数据中心领域,通常这些数据中心仍在采用传统的机械硬盘(HDD)和固态硬盘(SSD).而NVMe协议已经成为下一代数据中心存储的代理人.为了理解这种演变,回顾存储技术的发展过程,并检查在由该协议转换的一些新的应用工作负载是十分

未来数据中心的五大“走心”创新

新技术和新趋势在改变我们对数据中心的认识和看法.下面是今年需要格外关注的五大方向. 为Facebook专门定制的服务器机架 如果说人好比是企业组织的心脏,那么数据中心可以被认为是企业组织的大脑,或者甚至是口舌.高质量的存储和处理关系到企业的成功. 支撑数据中心的技术和流程取得了长足发展.一度被认为最先进的东西现在却被认为是老古董,管理这些新型数据中心所需的IT技能也在随之变化. 随着我们迈入到2015年,有必要关注一下几个热议的趋势和技术,看看它们在将来会如何影响贵企业组织. 下面是将影响数据中