基于堆叠文件系统的云计算存储优化

基于堆叠文件系统的云计算存储优化

郭婉 张晓 丰文雄

云环境中大量虚拟镜像带来的冗余会造成资源利用率降低,采用重复数据删除技术能缓解对存储空间以及网络带宽的需求,但同时也存在处理性能下降的问题。为此,提出一种基于堆叠文件系统的云计算存储优化方案。该方案利用可堆叠文件系统将用户对虚拟实例的少量修改信息存放于可读写盘中,将虚拟镜像存放于只读盘中,每次只保存用户对虚拟实例的少量修改信息,而无需保存整个实例。实验结果表明,该方案可在不影响性能的条件下降低存储容量,对文件系统性能的影响平均约为0.75%,在用户对虚拟实例只需少量修改的情况下,对存储容量的需求相比传统重复数据删除方案减少约35%。

基于堆叠文件系统的云计算存储优化

时间: 2025-01-26 23:29:34

基于堆叠文件系统的云计算存储优化的相关文章

基于重复数据删除的虚拟桌面存储优化技术

近年来,云计算已成为分布式计算领域中的研究热点,它是指运行在数据中心软硬件上的应用通过Internet为用户按需提供服务:并将数据中心内的软硬件资源统称为云,云计算自身并不是一种新技术,而是一种新服务模式.这种模式能够将设备安装和资源管理外包给云服务商,具有按使用计费和扩展灵活的特性,通过对IT资源的统一部署与集中管理,云计算能够优化资源的利用率,为用户提供廉价.高效.可靠的服务. 虚拟桌面作为一种典型的云计算应用,是建立在服务器虚拟化基础上的云应用.如图1所示,虚拟桌面基础架构在云中为用户提供

基于纠删码的云计算存储备份及恢复策略

基于纠删码的云计算存储备份及恢复策略 芦欣 刘渊 如何保障云存储系统中数据的可靠性是云计算领域的热点问题.副本备份技术是保障数据可靠性的重要手段,但是存在占用存储空间大.存储效率低等问题.纠删码能够提供优化的数据冗余度,以防止数据丢失,恰当地使用纠删码可以提高空间的利用效率并获得较好的数据保护效果,在通讯方面已经得到广泛应用.本文将纠删码引入云存储系统中,代替副本备份策略,以提高云存储系统的性能.实验表明该方案可以有效提高数据可靠性和空间利用率. 基于纠删码的云计算存储备份及恢复策略

基于SMDP的移动云计算网络安全服务与资源优化管理研究

基于SMDP的移动云计算网络安全服务与资源优化管理研究 西南交通大学    梁宏斌 移动云计算服务域一般是根据地理位置的不同而分布式配置的.如何在现有移动云计算资源的基础上,通过统一优化分配各个移动云计算服务域之间的云计算资源,从而达到充分利用现有移动云计算资源,提高整个移动云计算网络的收益以及移动云计算安全服务的服务质量的目的,就成为移动云计算网络安全服务资源优化管理的另一个重要的研究课题,而该课题在以前的移动云计算资源优化管理的研究中还未被涉及.因此,在论文的最后,针对该课题,在论文对移动云

基于小文件的内存云存储优化策略

基于小文件的内存云存储优化策略 英昌甜 于炯 鲁亮 刘建矿 由于内存云RAMCloud采用日志段的方式存储数据,因此当大量小文件存储于RAMCloud集群时,每个小文件独占整个段,会产生较多的段内碎片,从而导致内存的有效利用率较低以及大量的内存空间浪费.为了解决这个问题,提出基于文件分类的RAMCloud小文件存储优化策略.该策略首先根据文件的相关特性将小文件分为结构相关文件.逻辑相关文件以及相互独立文件三类;然后在存储时对结构相关的文件使用文件合并算法,逻辑相关和相互独立的小文件则使用分组算法

基于加密机制的云计算数据可靠存储方案研究

基于加密机制的云计算数据可靠存储方案研究 赵莉  王魁祎 为了克服因收发双方都使用同样钥匙导致的其安全性不高等缺点,引入深度加密机制,与AES(Advanced Encryption Standard)算法耦合,设计了基于双级加密的云计算数据可靠存储方案.先采用AES对用户数据客户端进行对称加密,到达云资源管理器后,采用分布式重组的方法进行深度加密,构造了"初级-深度"双级加密的云计算数据可靠存储结构,并完成了基于加密的云计算数据安全存储加密和解密操作流程.借助Eclipse与Java

杰赛科技:一种基于分布式技术的云存储技术

作为近几年兴起的云计算的一大重要组成部分,云存储承担着最底层以服务形式收集.存储和处理数据的任务. 企业用户和个人将数据托管给第三方,通过公有云.私有云或混合云形式对数据进行按需存取操作.云存储的优势主要在于:按需使用,按需付费;无需增加额外的硬件设施或配备专人负责维护,减少管理难度;将数据复制.备份.服务器扩容等工作交由第三方执行;快速部署配置,随时扩展增减,更加灵活可控. 在商业前景方面,以"用户创造内容"和"分享"为精神的Web2.0推动了全网域用户对在线服务

如何使用重复数据删除技术实施主存储优化

主要文件系统存储优化(也就是在同样的空间塞进更多的数据)继续在日益普及.这里的挑战是主存储的重复数据删除并不是没有规则的.你不能删除这个重复的数据,也不能删除那个重复的数据,你必须要认识到删除重复数据之后对设备性能的影响. EMC已经宣布了在自己的Celerra平台上删除重复数据的功能.NetApp使用这个功能已经有一段时间了.其它厂商也以积极的方式增加这个功能,其方法是在数据不流动之后对数据进行压缩和删除重复数据.然后,Storwize等公司一直以在线实时压缩的方式提供这种功能. 正如存储虚拟

任意列搜索之 列存储优化

标签 PostgreSQL , 列存储 , shard , 切片 , 大块 , 小块 , sort , 块级索引 , bitmap scan , 索引延迟 , 归整 背景 数据分析系统,决策系统的数据量通常非常庞大,属性(列)非常多,可能涉及到任意列的组合条件查询,筛选结果.聚合结果.多维分析等. 这种场景如何优化能满足实时的响应需求呢? PostgreSQL中有一些技术,可以满足此类场景. 1. 内置bitmapAnd bitmapOr,使用任意字段的索引搜索时,可以快速跳过不满足条件的块,快

解密OpenTSDB的表存储优化

摘要  OpenTSDB是一个分布式的.可伸缩的时间序列数据库,在DB-engines的时间序列数据库排行榜上排名第五.它的特点是能够提供最高毫秒级精度的时间序列数据存储,能够长久保存原始数据并且不失精度.它拥有很强的数据写入能力,支持大并发的数据写入,并且拥有可无限水平扩展的存储容量.         它的强大的数据写入能力与存储能力得益于它底层依赖的HBase数据库,也得益于它在表结构设计上做的大量的存储优化.         本篇文章会详细讲解其表结构设计,在理解它的表结构设计的同时,分析