cloudera manager管理已有cdh集群

问题描述

cloudera manager管理已有cdh集群

有cdh集群，hdfs有庞大数据，现在想用cloudera manager来管理该cdh集群，请问有什么方法在cloudera manager添加已有hdfs服务的，有过这方面经验的大神分享一下经验～

解决方案

可以在内网自建一个安装源服务器，然后修改安装源，把它指内网的服务器完成安装。 网上有很多教程教你如何离纯安装hadoop

解决方案二：

直接添加已有的hdfs,可以搭建集群后,修改hdfs的namenode和datanode配置的data文件路径,指向以前hdfs的文件
不过,建议不要这样做,因为可能由于版本不同会出现兼容性的问题

推荐通过ETL工具将数据导入新的集群

时间： 2024-08-02 05:14:45

cloudera manager管理已有cdh集群的相关文章

安装sentry报错-CDH集群中安装sentry，重启sentry一直起不来

问题描述 CDH集群中安装sentry,重启sentry一直起不来 1.在CDH集群中安装sentry重启时报错,以下是报错信息: Tue Apr 21 09:40:21 CST 2015 JAVA_HOME=/usr/java/jdk1.7.0_45-cloudera using /usr/java/jdk1.7.0_45-cloudera as JAVA_HOME using 5 as CDH_VERSION Debug is true storeKey true useTicketCach

RabbitMQ管理（5）——集群管理

rabbitmqctl join_cluster {cluster_node} [–ram] 将节点加入指定集群中.在这个命令执行前需要停止RabbitMQ应用并重置节点.更多详细内容请参考RabbitMQ安装. rabbitmqctl cluster_status 显示集群的状态.更多详细内容请参考RabbitMQ安装. rabbitmqctl change_cluster_node_type {disc|ram} 修改集群节点的类型.在这个命令执行前需要停止RabbitMQ应用.更多详细内容

阿里云计算资深总监：阿里云已实现单个集群5000节点规模

阿思达克通讯社10月24日讯,阿里云计算资深总监.飞天负责人唐洪24日在http://www.aliyun.com/zixun/aggregation/13501.html">阿里云开发者大会中表示,目前阿里云实现了单个集群5000节点的规模,从1500到5000用了半年的时间,已经完成包括软硬件在内的大部分标准化工作. 据介绍,飞天5k单点集群拥有10万核计算能力.100PB存储空间,可处理15万并发任务数,承载亿级别文件数目. 所谓飞天开放服务,是指主要为用户应用程序提供了计算和存储两

基于cloudera的BigInsights集群如何管理和应用集成系统

本文首先简要介绍 BigInsights 与 Cloudera 集成的相关背景,在此基础上介绍基于 cloudera 的 BigInsights 集群的系统架构,之后详细介绍在 Cloudera 之上的两种集成方式,最后介绍如何管理和应用集成系统. Cloudera 和 IBM 都是业界领先的大数据平台软件与服务提供商,2012 年 4 月,两家公司宣布在该领域建立合作关系,强强联手.Cloudera 提供了完整的 hadoop 系统,并在此基础上增强了可扩展性.稳定性和平台性能.InfoSph

如何管理一台集群的虚拟机

现如今的企业组织需要保证全年的每一天都24小时全天候的正常运营.而且,他们的服务必须保持时刻在线,否则就会失去客户.同时,在今天的全球市场上,确保企业的系统总是可用,以使得企业组织保持竞争优势,进而保持和提升用户满意度是至关重要的.数据中心的高度可用性可以通过几种方式来实现,但最常见的和最简单的方式则是通过服务器虚拟化和故障转移群集(Failover Cluster). 服务器虚拟化为许多企业组织的IT部门带来了诸多的益处,包括允许他们将多款不同的系统整合到一台单一的主机服务器,带来了更高的资源

DockOne微信分享（一零三）：Kubernetes 有状态集群服务部署与管理

本文讲的是DockOne微信分享(一零三):Kubernetes 有状态集群服务部署与管理[编者的话]本次分享将深入介绍Kubernetes如何满足有状态集群服务对容器编排系统提出的新需求,包括如何使用Kubernetes的动态存储请求与分配机制来实现服务状态的持久化存储,以及与高效部署和运行有状态集群服务相关的Kubernetes新特性,如Init Container.PetSet (StatefulSet)等.最后通过一个MySQL集群实例详解在Kubernetes中如何轻松部署一个高可用的

WAS V8.5应用程序版本管理、动态集群、健康管理和智能路由

智能管理中包括了应用程序版本管.动态集群.健康管理和智能路由.本文主要向您介绍应用程序版本管理. IBM 在 2012 年 6 月 15 日发布的 WebSphere Application Server (以下简称为 WAS)V8.5.WAS V8.5 中的一个重大变化,就是将之前独立的产品 WebSphere Virtual Enterprise (以下简称为 WVE)的功能完全并入到了 WAS 中.之前由 WVE 提供的相关功能,在 WAS V8.5 中,我们称之为智能管理.智能管理中包括

Solr集群搭建，zookeeper集群搭建，Solr分片管理，Solr集群下的DataImport，分词配置。

1   什么是SolrCloud SolrCloud(solr 云)是Solr提供的分布式搜索方案,当你需要大规模,容错,分布式索引和检索能力时使用 SolrCloud.当一个系统的索引数据量少的时候是不需要使用SolrCloud的,当索引量很大,搜索请求并发很高,这时需要使 用SolrCloud来满足这些需求. SolrCloud是基于Solr和Zookeeper的分布式搜索方案,它的主要思想是使用Zookeeper作为集群的配置信息中心. 它有几个特色功能: 1)集中式的配置信息 2)自动容

如何通过自动化Kubernetes集群管理容器

许多开发者已经求助于Docker容器来实现云端和本地的新应用迭代时的一致性,而且很多应用都要依赖多个Docker容器的编排.而围绕着容器集的启动以及为了让它们能够协作而连带的相关设置和配置又引发了一系列新的挑战. 为了弥补这一差距,软件产业一直在向容器管理系统Kubernetes靠拢,它承担了生态体系的职能,实现对容器集的自动化部署.在旧金山举行的KubeCon会议上,专家们讨论了其中一些基于Kubernetes的集群自动化部署的最佳实践和工具. Univa工程总监Cameron Brunner