求openstack、hadoop和磁盘阵列共存的解决方案

问题描述

目前项目环境搭建需要openstack和hadoop环境,openstack负责分配不同虚拟镜像,hadoop主要负责数据存储和将来mapreduce的计算。网络环境有32台服务器,一个磁盘阵列,要求提供高速文件访问和在不同虚拟机环境下的并行计算。请有经验的行家给个合理的解决方案。自己的一些想法:1、看到Savannaproject的基本思路是把hadoop架设在openstack上,应该是利用openstack灵活分配虚拟镜像的能力,定制NameNode、DataNode等节点镜像,然后由openstack负责根据用户指定规模和拓扑分配hadoop的分布式集群,但我不需要这么灵活,只要有一个hadoop集群就够了,那么将hadoop架设在openstack上的难度有哪些?会不会因为增加了openstack对虚拟镜像的管理而导致HDFS文件系统的性能受损?2、在网上看到这种解决方案“在私有云环境中,常见的大数据部署模型之一是:将OpenStack的Swift存储技术部署到ApacheHadoopMapReduce集群,从而实现处理功能。”如果按这个思路,应该是openstack和hadoop分别部署,把openstack的swift部署到hadoop集群,那么在部署时将swift部署到磁盘阵列和hadoop集群有何区别,有何困难?3、1或2的两个方案哪个更可行?如何使openstack和hadoop充分利用磁盘阵列的存储资源?

解决方案

解决方案二:
楼主现在找到切实可行的方案没?我现在也处于跟你类似的阶段,anbo724@gmail.com希望可以讨论一下
解决方案三:
云计算很多东西需要继续研究
解决方案四:
方案1是可行的,我搭建过
解决方案五:
方案1是可行的,我搭建过

时间: 2025-01-08 02:11:28

求openstack、hadoop和磁盘阵列共存的解决方案的相关文章

vc++-跪求SelectObject 与CDC 之间的问题解决方案

问题描述 跪求SelectObject 与CDC 之间的问题解决方案 CDC *m_pDC; COLORREF ColorValue=RGB(255,255,255); CRect rect=CRect(50,50,200,200); CBrush newBrush; CBrush *oldBrush; newBrush.CreateSolidBrush(ColorValue); oldBrush=m_pDC->SelectObject(&newBrush); m_pDC->Recta

红帽发布OpenStack平台RHOP 8 打造一站式解决方案

红帽碰到一些困难. 目前,Canonical的Ubuntu在 OpenStack云操作系统方面处领先地位.其他诸如IBM的顶级科技公司也有意加入OpenStack的混战,新的专用OpenStack公司(例如Mirantis)也在不断地冒了出来. Linux巨头红帽决意成为云巨头 不过这并没有令红帽放慢脚步.就在OpenStack峰会召开的前几天,红帽宣布红帽云套件和红帽OpenStack平台(RHOP)8面向通用用户发布的消息.红帽就此发布了一整套整合混合云栈,包括:应用平台即服务(PaaS)容

求java mail 某些汉字乱码的解决方案

问题描述 用javamail接收邮件,中文不乱码,但某些生僻字读出来是乱码,各位有遇到这个问题的,求指点. 解决方案 解决方案二:什么叫生僻字读出来乱码.用的什么字符集.UTF-8先试试解决方案三:生僻字是不是系统字库不包含啊?解决方案四:记得以前遇到过一个中文乱码原因是生僻字系统字库木有!

部署Hadoop相关的四个解决方案

&http://www.aliyun.com/zixun/aggregation/37954.html">nbsp;     Apache Hadoop距离企业级应用可以说是越来越近了,不少大型公司在他们的系统中都部署了Hadoop的相关解决方案.然而对于公司的高层领导来说,它只是一个符号化的名词. Hadoop到底适不适合我们企业?部署Hadoop到底划不划算?它能给我们带来什么?对于究竟要不要投资这项技术,你需要向领导解释清楚.本文就介绍了一些关于Hadoop的常见问题,希望能

windows 7配置host添加本地域名测试及代理和host共存的解决方案

今天朋友要求做一个无限子站,泛解析的多用户店铺的网站,所以本地测试的时候,必须得用域名来实现了.以前一次就能整成功的apache和hosts本地域名调试,结果今天死活弄不出来!纠结阿... 首先,先把C:\Windows\System32\drivers\etc下的hosts复制到桌面,然后用记事本打开,添加自己的记录,就按照他格式 # localhost name resolution is handled within DNS itself. # 127.0.0.1 localhost #

求openstack的源代码

问题描述 请求源代码,如果同时有所需语言的文档,万分感谢!! 解决方案 解决方案二:嘎嘎,早知道从这给你个连接了解决方案三:http://devstack.org/从这个链接上面下吧,

急求spring+ibatis处理clob类型数据解决方案(奉全分)

问题描述 由于客户提出系统升级,要求某些功能支持>4000字节字符,所以现有的表结构不能满足需求,要修改成支持更大数据的clob类型.我们系统是spring+ibatis架构,在网上找了很多资料,spring+ibatis能够对clob数据类型有良好的支持.分三步实现:1.oracle支持,在dataAccessContext.xml中添加如下配置:<!--clob字段处理配置开始--><beanid="nativeJdbcExtractor"class=&qu

Infortrend磁盘阵列系统存储解决方案

Infortrend存储为CERN科研服务 位于瑞士的欧洲核能研究机构(CERN)是全世界最大的粒子物理研究实验室,它的大型强子对撞器产生的大量的数据需要数百TB高度可靠的存储空间 . CERN是欧洲第一个共同科学机构,目前拥有20个会员国,有超过1万位科学家在其中致力于解开宇宙组成的奥秘.虽然CERN的研究对外人来说听起来难以理解,但这些研究与日常生活的许多层面都息息相关,范围包括癌症治疗.医疗影像以及因特网的开发. 存储挑战 大型强子对撞器(Large Hardon Collider,LHC

求推荐hadoop 2.0学习书籍

问题描述 各位学习hadoop的朋友,想请大家推荐一本学习hadoop2.0的书籍,小弟刚开始学习hadoop,见到网上有好多关于hadoop的书籍,但是好像好多都是在hadoop1.0的基础上编写的,但是,现在hadoop已经到2.0,所以,感觉哪些书籍应该有一些不太符合hadoop2.0的技术,因此,希望求得一本关于hadoop2.0的书籍,希望知道的朋友推荐下,在此感谢!