一种基于FPGA云存储架构的关键技术研究

一种基于FPGA云存储架构的关键技术研究

云南大学  陈成

目前常见的云存储服务有:亚马逊的Simple Storage Service(S3)、Nutanix的存储服务、搜狐企业网盘、百度云盘等等,而这些并不提供小型开发板所需的云服务。本系统则是以TCP/IP做为基本通信手段,并且加入自定义的数据通信协议,通过整合分布式存储的调度思想,来实现基于FPGA的云存储架构。这样不仅使FPGA开发板能够实现云存储的功能,同时也为基于FPGA的云计算打下了坚实的基础。 本系统利用集群以及分布式的思想,将多块FPGA开发板模拟成大量的存储设备,通过对目标数据的统一映射规约处理,实现对数据安全、稳定、可靠的云存储,从而最终实现本系统的功能。因为FPGA具有并行性以及动态可重构性的等等特性,使得本系统能够很好的在FPGA硬件集群上完成预定的功能。 本系统在设计实现的过程中,使用了Quartus Ⅱ、Eclipse等集成开发环境,使用Ethereal软件进行网络抓包验证,并且使用了交换机完成开发过程中的各种实验,用到的编码语言包括:verilog、java、htm15、js等。最终的测试、运行平台选择了Altera公司的DE2开发板、PC机、路由器等,此外还需要一个交互软件(即一个网站,提供用户使用界面)。经过测试、验证,本系统可以稳定的运行在50MHz时钟频率的DE2开发板上。 本文从数据传输速率、数据存储正确性、数据存储稳定性等方面对系统进行了详细的分析与评估。结果表明,本系统能够正确完成云存储的功能,拥有FPGA所特有的功耗低、集成度高、稳定性好的特点,具有明显的性能优势,并且是开发FPGA云计算的重要铺垫。因此,基于FPGA的云存储架构具有较好的理论价值和实际意义。

一种基于FPGA云存储架构的关键技术研究

时间: 2024-09-12 19:54:58

一种基于FPGA云存储架构的关键技术研究的相关文章

基于云计算的数据挖掘平台架构及其关键技术研究

基于云计算的数据挖掘平台架构及其关键技术研究 丁岩 杨庆平 钱煜明 随着云计算日寸代的到来,传统数据挖掘系统在海量数据的分析挖掘方面存在性能瓶颈.文章提出了基于云计算的数据挖掘平台,该平台与传统的数据挖掘系统架构相比有高可扩展性.海量数据处理能力.面向服务.硬件成本低廉等优越性,可以支持大范围分布式数据挖掘的设计和应用.该平台能极大减少运营商.企业在数据挖掘技术上的投入并能加快其挖掘业务的推出,缩短研发周期,进一步提高产品收益. 基于云计算的数据挖掘平台架构及其关键技术研究

基于P2P云存储备份系统设计及日志恢复实现

基于P2P云存储备份系统设计及日志恢复实现 吉林大学  陆丹 本文做了如下工作:1.集成提供存储服务能力的云存储与无中心化.可扩展的P2P技术,提出一种基于P2P云存储备份系统,从体系结构.网络拓扑结构.总体框架结构三方面阐述系统结构.采用Chord算法协调多个服务管理节点,并分发用户的请求到多个数据块服务器,一个服务管理节点.多个数据块服务器和备份服务器形成一个节点存储簇,节点存储簇完成用户数据的存储和管理,解决中心节点瓶颈问题.2.设计文件存储与访问计划,定义文件元数据信息表.文件索引表.备

一个弹性云存储架构驾驭万千云需求

对于一个大型企业.中小企业,或者个人用户而言,一致认为不能承受的事情是什么?答案会有很多种,但一种答案会得到绝大多数人的认同,它就是数据丢失.在信息的重要性越来越关系到企业的生存时,数据保护自然更加受到重视.于是,各种容灾系统.备份.归档的方案纷纷登台,试图让大家的信息安全固若金汤.但在实施过程中,无论是实施成本还是技术,都让众多的企业知难而退.现在,众多的企业,尤其是个人用户,在数据保护方面都处于"真空"状态,一些企业和个人用户通过移动硬盘和光盘的方式来保存数据,但无法做到及时的备份

云存储是一种趋势 企业级云存储将催生黑马

近日,金山云CEO张宏江表示公司已获得投资人YuriMilner2000万美元的A轮投资.风投频频向云存储行业投来橄榄枝,金山不是第一个,相信也绝非最后一个.资本市场对云存储的青睐不是偶然,因为云存储的需求是刚性的,它是大数据时代必然的发展趋势. 云存储是一种趋势 云存储是一个以数据存储和管理为核心的云计算系统,通过集群应用.网格技术或分布式文件系统等功能,将网络中 大量各种不同类型的存储设备通过应用软件集合起来http://www.aliyun.com/zixun/aggregation/18

云存储结构模型及云存储架构的比较研究

云存储结构模型及云存储架构的比较研究 王哈琴 云存储的概念是一个新的概念,它所利用的技术包括集群计算.分布式文件系统以及网格计算技术等. 这些异构的存储系统通过彼此的协调.配合,构成一个虚拟的.巨大的存储系统,作为一个整体共同对外提供数据存储和业务访问功能.文章阐述了云存储结构模型,并对几种典型云存储的架构进行了比较研究. 云存储结构模型及云存储架构的比较研究

云存储架构在组建时需要主要的基本标准

云存储架构是云存储组建的一个重要环节.尤其是对以后的服务十分重要.一个好的云存储架构能为以后的服务水平起到一个很好的提升作用.下面就让我们了解下云存储架构的具体标准. 不管云存储架构是公共的还是私有的,成功的关键是,尽可能有效地创建一个能交付每一种云存储架构服务的合适的基础架构.对于私有云存储架构,你可能需要支持广泛的应用,所以你的目标是创建一个能灵活按需分配资源给每一个应用的基础架构. 显然,在计算端,服务器虚拟化为云存储架构服务提供了一个合适的基础架构,因为它允许计算资源被有效地划分,快速地

百度ARM云存储架构

百度ARM云存储架构 赖春波  百度存储架构师 --百度云存储简介 --云存储服务的挑战 --百度云存储架构的演进 --百度ARM云存储架构 --未来工作 百度ARM云存储架构

云环境中的移动文件存储和时空数据分析关键技术研究

云环境中的移动文件存储和时空数据分析关键技术研究 国防科学技术大学  毛华坚 本文的研究工作和创新点如下:(1)提出了一种基于文件系统的异构云存储服务无缝统一访问方法Wukong.目前不同的云存储服务访问接口各异,由于缺乏无缝访问多种云存储服务的统一接口,时空数据应用不能够不加修改地直接访问和使用后端云存储数据.文件系统是被应用程序广泛支持的一种数据使用接口,以文件系统接口封装各种云存储服务可以保证应用程序对异构云存储服务的直接访问.本文首次提出了一种基于文件系统的异构云存储服务无缝统一访问方法

基于Hadoop的智能调度云数据中心关键技术研究

基于Hadoop的智能调度云数据中心关键技术研究 华北电力大学   杨龑骄 本文针对智能电网调度云数据中心的三个关键问题进行了重点研究.第一.云数据中心内部网络结构.在分析对比传统网络结构算法以及最新提出的BCube.DCell数据中心网络结构算法的前提下,提出了更具有扩展性.容错性的PCube网络结构算法:第二.Hadoop云平台的副本存储策略.针对Hadoop现有副本存放策略的不足,本文研究目前学者提出HDFS改进存储策略--CoHadoop副本存储策略,并在此基础上对其智能性加以改进,依靠