基于云计算的数据存储技术研究

基于云计算的数据存储技术研究

孙知信 黄涵霞

以云计算环境下大数据存储技术为研究对象,首先介绍了云计算环境下主要的两种典型的分布式存储系统,即Google的GFS 和Hadoop的HDFS;对其中的数据存储技术进行了专门分析,从可扩展性和延迟性(如何支持海量小文件的存储)、容错性(在数据丢失时进行数据恢复)和海量数据存储的实时性这3个方面对现有技术进行了评价。在此基础上,提出了分布式文件系统的系统架构。最后给出了研究展望。

基于云计算的数据存储技术研究

时间: 2024-12-21 12:47:24

基于云计算的数据存储技术研究的相关文章

基于云计算的远程诊断关键技术研究

基于云计算的远程诊断关键技术研究 郑州大学   朱朝鹏 本文针对云计算当中的分布式存储与并行计算技术进行研究.研究Hadoop平台上故障诊断数据的存储管理方案以及基于Map/Reduced的相关智能故障诊断算法的并行计算方式,为在Hadoop或其它云计算平台上开发远程诊断相关应用程序打下一定的基础.基于云计算的远程诊断系统具有灵活性.低成本.高效率等特点,在云计算环境中研究适合于设备远程诊断相关技术的解决方案,可以同时促进云计算以及设备故障诊断技术的进步. 基于云计算的远程诊断关键技术研究

基于NoSQL数据库的大数据存储技术的研究与应用

基于NoSQL数据库的大数据存储技术的研究与应用 孙中廷 实际工程中采集和处理的数据量特别大,这对传统数据库技术提出巨大挑战.针对传统关系型数据库存储速度慢.对硬件要求高的缺点,提出一种以NoSQL数据库为基础的大数据处理方法,打破了传统数据库的关系模型,数据以一种自由的方式存储,而不依赖固定的表结构.该方法主要是将经验模态分解并与NoSQL数据库技术相结合,应用于大型结构件的变形监测中,构建出一个基于NoSQL数据库系统的大型结构件变形监测系统.仿真结果表明,该方法可以实现大型结构件变形监测数

面向云计算数据中心的网络存储技术研究

面向云计算数据中心的网络存储技术研究 王志恒  李小勇 分析了云计算数据中心的存储需求,探讨了NAS和SAN的工作机制,对其在虚拟机环境下的性能进行比较测试.实验表明,在虚拟机环境下NAS和SAN之间的性能差异小于10%,远小于传统应用环境中的性能差异.综合考虑存储系统的可扩展性.易管理性等多种因素,在虚拟机环境下使用NAS存储是更为合理的方案. 面向云计算数据中心的网络存储技术研究

基于云计算的数据查找与加密方案研究

基于云计算的数据查找与加密方案研究 于延,王建华,孙惠杰 云计算环境下的数据查找与加密技术是目前的研究热点.针对现有方案的不足,本文提出了一种改进的数据查找与加密方案.在数据查找方面,本文首先建立了身份管理模型,然后提出了基于权限的身份鉴别算法来实现从系统资源到身份数量之间的最优指派:在数据加密方面,提出了一种可计算加密方案 CES,该方案能支持云数据的模糊检索和基本算术运算,有效地对用户的敏感数据进行隐私保护.仿真实验结果表明,本文的方案是有效的,在加.解密性能以及存储与通信开销等方面要优于传

一种基于NoSQL的地图瓦片数据存储技术

一种基于NoSQL的地图瓦片数据存储技术 陈超 ,王亮,闫浩文,仇阿根,李玉祥,朱芳菲 本文首先介绍了NoSQL(非关系型数据库)的起源与发展,对比其与关系型数据库的优缺点,提出了基于NoSQL的地图瓦片数据存储策略,通过实验对比分析了面向文档型的NoSQL数据库产品Mongo DB与SQL Serv-er 2000在瓦片入库与并发访问性能上的差异.研究结果表明,Mongo DB在海量空间数据存储与并发访问方面具有明显的高效性. 一种基于NoSQL的地图瓦片数据存储技术

云计算环境下的数据存储问题研究

伴随着信息通信和处理技术的高速发展,计算机自问世以来,已经跨越了单机系统时代.网络系统时代.Web服务与网络时代,进入了云计算时代.云计算的出现,带来了商业模式和工作方式的革命性转变,改变了过去数据主要集中在本地存储和处理的传统模式,使得企业机构和个人能够方便快捷地通过网络享受到计算力.存储空间和软件等服务,极大地降低了硬件等基础设施的重复购置和闲置,有效避免了人力资源的浪费,节约了大量的资金和人力支出. 一.云计算定义 云计算是一种基于共享基础架构的商业计算模型,是分布式计算.网格计算和并行计

[文档]基于云计算的数据中心安全体系研究与实现

基于云计算的数据中心安全体系研究与实现 张水平, 李纪真, 张凤琴, 李晓波, 余侃民 针对当前数据中心的安全现状,以传统数据中心安全防范体系为框架,按照云计算的要求和特点,采用"云安全"的架构为数据中心的安全体系提出了一种新的解决方案,并根据方案的设计运用一些关键技术对相关模块进行了实验室环境下的对照实现,能通过直观的界面对数据中心的安全性进行控制,以此保障了数据中心的安全,并为今后数据中心安全体系的发展奠定了基础. 关键词:数据中心: 云计算: 云安全:入侵防御:认证 [下载地址]

面向人口信息系统的云计算中隐私保护技术研究

面向人口信息系统的云计算中隐私保护技术研究 北京邮电大学  苗新宇 本文所提出的基于半可信第三方的隐私保护模型是解决人口信息系统中的数据存储到云服务平台所面临的数据隐私泄露问题.通过引入的基于互斥数据属性的数据切片以及半可信第三方的隐私保护策略所生成的数据切片标识,达到人口信息系统数据在模型中的存储流程.人口信息系统数据的删除.读取流程的隐私保护.最后,对于模型的安全性指标进行了分析,能够达到对人口信息系统数据的隐私保护的目的. 关键词-人口信息系统: 云计算: 隐私保护: 数据分片    te

基于云计算的数据正在优化现代初创企业

初创企业已经为市场竞争做好了准备.并想出了一个改善根深蒂固行业的惊人方法.现在是把新概念推向公众的时候了. 如果企业在这个阶段没有被问题淹没,那么可能想找到另一种谋生的方式.这将有很多方式伴产品推向市场,从雇佣销售团队到部署在线广告活动和开展展会. 基于云计算的数据平台终于为这些问题提供了明确的答案,这种形式甚至可以用于初创公司.以前需要大量人力投入的工作,现在可以通过点击鼠标来实现. 基于云计算的数据在规模上可以负担 基于云意味着信息是从各地收集和访问的.例如,人们在Facebook上所做的一