cloudera manager管理已有cdh集群 20C

有cdh集群,hdfs有庞大数据,现在想用cloudera manager来管理该cdh集群,请问有什么方法在cloudera manager添加已有hdfs服务的,有过这方面经验的大神分享一下经验~

2个回答

可以在内网自建一个安装源服务器,然后修改安装源,把它指内网的服务器完成安装。 网上有很多教程教你如何离纯安装hadoop

marsedely
marsedely 安装没问题,安装cloudera manager 完后不可能新建hdfs服务呗,那样数据就都没有了
3 年多之前 回复

直接添加已有的hdfs,可以搭建集群后,修改hdfs的namenode和datanode配置的data文件路径,指向以前hdfs的文件
不过,建议不要这样做,因为可能由于版本不同会出现兼容性的问题

推荐通过ETL工具将数据导入新的集群

af463419014
天之灵丶 所以,使用ETL将数据重新导入这样的做法比较好,毕竟cloudera没有提供将apache版本兼容到cdh的操作,自己手动操作又有一定的风险
3 年多之前 回复
marsedely
marsedely 版本倒是一样的,我也想过修改路径,但是如果直接修改路径到原来位置,它自己把数据清空了就悲剧了
3 年多之前 回复
Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
关于cloudera manager管理已有cdh集群的问题
看了很多,网上的资料也好,自己也好,身边的朋友也好,大家都差不多都是通过cm来安装cdh。rn突然想到一个问题,如果我是拿了cdh的源码自己编译安装了集群,然后再装cm来管理这个集群可以吗?应该可以吧,但怎么做,哪里有相关资料?谢谢了
ubuntu完全分布式搭建CDH集群(Cloudera Manager)
基于Ubuntu 14.04.3,搭建完全分布式CDH集群参考资料。 在公司测试环境中使用3台服务器完成搭建,
Cloudera CDH集群运维手册
Cloudera CDH集群运维手册,带截图的,挺详细,有用Cloudera cdh集群的可以看看
cloudera manager 安装cdh 搭建大数据集群,详细讲解核心
该文档详细讲解了cloudera manager安装cdh步骤,作者看了官方文档不下千次,呕心沥血整理,非常详细,以及各种安装方法的核心优缺点
Cloudera Manager 和 CHD5.3.3 集群 离线安装
Cloudera Manager 和 CHD5.3.3 集群 离线安装,非常好用。
Cloudera Manager和CDH搭建相关事项
Cloudera Manager和CDH搭建可参考“https://blog.csdn.net/gtsina/article/details/78048925”这篇博客,亲测可以搭建成功。搭建过程遇到的一些问题及解决方案记录如下: 1、安装之前一定要配置ntpd服务器,不然会出现警告 解决方案: 如何安装ntpd服务器,请参考“https://blog.csdn.net/freedomboy...
Cloudera Manager(简称CM)+CDH构建大数据平台
标题一、Cloudera Manager介绍1.CM技术架构2.CM四大功能3.分析表格4.本教程使用虚拟机配置二.服务器集群时间同步1.配置时间为中国的时区2.ntp时间同步服务器安装3.配置ntp4.启动ntp服务5.其它节点进行时间同步三、构建本地Cloudera yum源1.主节点安装http服务2.CM的tar包3.创建本地源四、设置SELINUX五、安装mysql数据库六、安装Clou...
黑猴子的家:Cloudera Manager 部署 CDH
1、官方网址安装指南 https://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_install_path_b.html 2、服务器环境基本操作 (1)修改静态ip (2)禁用selinux (3)修改主机名 (4)修改主机名IP映射 hosts文件 (5)关闭防火墙 (6)安装httpd服务 (7)禁用ipv...
cloudera manager和cdh目录空间报警解决
相信使用cloudera manager管理集群最先遇到的一个问题就是目录空间不够默认路径都在系统盘,系统盘一般不会很大。所以最笨的办法是安装包的路径和各个组件输出路径配置到其他大的目录,但这种方式不利于维护!我现在都是所有报警目录都做软链接到大的磁盘目录,如,/data目录空间较大,挂了一个2个T的磁盘,可以软链接到这,如 mv /dfs /data/ ln -s /data/dfs /dfs
大数据集群cloudera CDH安装手册
大数据集群 cloudera CDH 安装手册 在服务器上安装CDH的实验 亲测可用
快速入门CDH(Cloudera Hadoop)集群的搭建
在此说明,本人用的是普通用户(如hadoop) 一、创建三台虚拟机 如何创建在本人博客里有详细介绍,这里就不详细介绍了。 二、修改IP,以及主机名等 1、修改IP: sudo vi /etc/sysconfig/network-scripts/ifcfg-eth0 IPADDR:对应自己设置的IP,但是前三个数字要和虚拟网络编辑器中的NAT模式下的子网一样: ONBOOT:设置为yes B...
cloudera manager生产集群升级流程
1.将rpm包和必要的依赖文件按照目录结构存入Linux。   下载网址:e-primary.cloudera.com/cm5/redhat/6/x86_64/cm/5.9.0/  node0 中全部。  node1-3中只存入agent和daemons。 将parcel传入Linux中的/opt/cloudera/parcel-repo,更改权限755。 2.备份 http://ww
Cloudera Manager搭建集群服务器启动失败
问题:       cloudera manager搭建集群的服务器暂停一段时间后,启动失败。解决办法:       可能是因为server和agent没有启动在Linux下启动server和agent,重启监控界面的服务即可。此处需要注意的是,有些组件对集群的时间要求比较高,例如HBase,如果遇到关于HBase的以下错误,可以尝试着同步以下集群的时间。       同步时间之后,监控界面重启H...
如何用cloudera manager接管已有hadoop的cdh版本集群
本文介绍如何搭建cloudera manager去接入已有hadoop组件(cdh),搜索国内资料并无整体介绍,没有任何参考文章可以借鉴;通过大数据qq交流群当中某老师提供的国外某篇cloudera cto的文章得到解决思路,经实验调试可以实现此功能。 下面进入本文主题。 一、下载必备文件: 1.cloudera manager: 大部分公司内大数据集群环境都无公网访问权限,针对当前集...
Cloudera CDH 安装和配置文档
学习hadoop是在平台上学习的文档,与大家一起共享,交流学习
Cloudera CDH搭建
cloudera hadoop搭建手册,CDH包括hdfs mapreduce hbase hive oozie sqoop zookeeper pig 等
Cloudera CDH 离线安装与使用
CDH 在线安装方法如下,方便,但是由于在国内,访问这个网站的速度很慢,并不快捷。在线安装Cloudera Manager服务器 # 配置cloudera-cdh源和cloudera-manager源# cloudera-managerwget http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo# clo...
clouder manager完整搭建cdh集群
搭建cdh全过程 1)根据文档 “安装RedHat+Linux+7” 安装好centos7的操作系统 (3台机器,内存9g、3g、3g; 磁盘40g、15g、15g) 实际配置多台机器:? 1)利用cdh配置大数据集群环境 2)制作一个系统(里面已经安装了所需要的软件) 3)系统安装,然后主节点肯定从头到尾配置(里面会存在mysql,clouderManager-Server,,,从节点所...
修改cloudera manager管理主机名(转)
I installed the Cloudera Manager 4 on a 1GbE default setup on eth0/bond0 and now I need to use 10GbE or Infiniband IB or 40GbE without the reinstall. How I did it!!  The assumptions here are that y...
ambari能否管理已有集群
我在安装ambari之前已经手动配置好了一个3个节点的集群,请问ambari能否查看这个集群呢,如果能,怎么查看?我现在在安装好的ambari页面里,查看不到,显示没有集群?rn
[CDH基础]--Cloudera Manager的安装包和pacels下载链接
一、基本组件安装1、pacels下载:http://archive.cloudera.com/cdh5/parcels/2、Cloudera Manager下载:http://archive.cloudera.com/cm5/cm/5/3、maven 仓库:https://repository.cloudera.com/artifactory/cloudera-repos/4、CDH安装说明:ht...
Cloudera Manager CDH 5.12 大数据处理平台部署指南
Cloudera Manager CDH 5.12 部署指南 官方共给出了3中安装方式。第一种方法必须要求所有机器都能连网,由于各种网络超时错误,基本没法用。第二种方法使用CM的在线yum源,在线下载很多包,同样是超时严重。第三种方法是全离线方式,实际情况是也只能用这个。 1、Cloudera Manager的部署条件 CDH不支持在容器中部署。支持Oracle JDK7
Cloudera Manager 和 CDH 4 终极安装 - 冰羽的世界
http://www.tuicool.com/articles/AnuiUra
cloudera manager安装CDH版本的spark 无法连接解决办法
前提:在很久很久以前,搭了一套cloudera manger 的集群,全组件安装上之后,一直没有使用spark ,安装时出现了很多问题,这个权限不足,那个权限不足的,到最后只将用的那几个组件给调试好了,其他的一直都没管。最近使用了spark 发现7077无法连接。 这个都无法连接,你让我在这上面怎么跑我风骚帅气的代码,找找原因吧。毕竟是cloudera manger安装的,而且安装过程中还出现了一...
从零搭建生产Hadoop集群(四)——Cloudera Manager及CDH的卸载
从零搭建生产Hadoop集群(四)——Cloudera Manager及CDH的卸载一、概述二、卸载方法1.安装过程中出现异常重装1)删除相关文件和目录2)重新运行installer2.完全卸载集群1)停止集群所有服务2)停用和删除parcels3)卸载Cloudera Manager Server(1)停止Cloudera Manager Server和它的数据库(2)卸载Cloudera Ma...
【译】Cloudera Manager(CDH)入门系列之一 (概述)
Cloudera Manager 是一个端到端用于管理CDH集群的程序。Cloudera Manager提供了CDH群集很多细节的可视化和控制,因此它为企业化部署提供了一个标准。它使得企业能够高效、合理地管理集群。使用Cloudera Manager,用户可以轻松部署和集中操作完整的CDH堆栈和其他托管服务。这个程序可以自动地安装相关服务,将部署时间大大缩短。它为您提供运行主机和服务的集群范围的...
Cloudera Manager 之三(安装)
操作系统: CentOs6.4 虚拟机(4核 3G) 主机: cdh01(server & agent) + cdh02( agent ) CDH版本:cdh5.7.1 jdk8 准备工作 关闭防火墙 在两台主机上都运行一下命令 service iptables stop 设置主机名 vim /etc/sysconfig/network 将HOSTNAME 分别改成cdh01和c...
Cloudera Manager安装方式
Cloudera CDH构建企业大数据平台视频教程:本课程主要讲解如何在企业实际应用中构建大数据平台,详细阐述了大数据平台的资源规划与设计在企业中的佳方案。并且基于Cloudera Manager如何去管理大数据平台的各个服务组件。从经验理论到实战,从设计思想到流程实施,本课程做了全面、细致的讲解。
Cloudera Manager 之二 (架构)
架构(Architecture) 如下图所示,Cloudera Manager 的核心是 Cloudera Manager Server(一下简称Server)。Server 托管管理控制台 web 服务和应用程序逻辑,并负责软件的安装、配置、服务的启动与关闭以及管理集群。 Server 和其他一些组件共同工作: Agent - 安装在每台主机上。Agent 负责进程的启动和停止,解压配置,触...
Cloudera Manager 之四(管理控制台)
Cloudera 管理控制台是一个网站页面,你可以用它来配置、管理以及监控 CDH。 如果服务已经配置,控制台头部的导航栏将显示如下: 导航栏显示以下信息: 集群(Clusters > cluster_name) 服务(Services) - 展示个别服务,以及 Cloudera Management 服务,在这个页面你可以: 查看服务实例的状态以及其他细节,也可以查看与服务相关的...
安装Cloudera Manager Server
Cloudera CDH构建企业大数据平台视频教程:本课程主要讲解如何在企业实际应用中构建大数据平台,详细阐述了大数据平台的资源规划与设计在企业中的佳方案。并且基于Cloudera Manager如何去管理大数据平台的各个服务组件。从经验理论到实战,从设计思想到流程实施,本课程做了全面、细致的讲解。
成功安装部署Cloudera Manager
本课程主要讲解在实际项目开发中,企业构建大数据平台的方案及实战。详细阐述企业级大数据平台的架构设计、机器选型、集群规划、技术选型、资源规划等技术方案。实战演练基于Cloudera Manager(CDH6)安装部署、监控管理、运营维护大数据平台的各个服务组件。从理论经验到实战演练,从设计思想到流程实施,亲力亲测,你也绝对可以。
在虚拟机上安装cloudera manager
1、准备工作的设置 在安装或者拷贝虚拟机时,如果网络连接不上,那么先删除之前的配置文件: rm -rf /etc/udev/rules.d/70-persistent-net.rules 设置网络(配置为桥接模式): /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE="eth0" BOOTPROTO="static" IPADDR=19
cloudera manager启动失败的问题
1.  [root@hd0 ~]# service cloudera-scm-server start Starting cloudera-scm-server:                              [FAILED] 2.  [root@hd0 ~]# service cloudera-scm-server status cloudera-scm-server
cloudera manager安装
自己安装的安装过程记录,可能出现的问题都有记录,图片和文字结合,通俗易懂。
最新Cloudera Manager中文手册
最新Cloudera Manager中文手册,Cloudera Manager产品介绍
Cloudera Manager 离线安装教程
前言 以前部署hadoop集群,一直使用cloudera提供的tarball部署安装,今天尝试使用CM在新机器部署hadoop,因为使用它使用起来简单方便,并且提供了一系列的监控功能.但由于CM的安装是要联网的,而且cloudera还在中国没有源,所以安装过程非常的慢,而且失败率很高(网络不好的同学相信很有体会).所以自己摸索着搭建一个本地源,用于CM的安装.记录如下     环境: ...
cloudera manager安装问题记录
使用cloudera manager安装hadoop,过程中日志记录错误如下: Could not initialize database server. This usually means that your PostgreSQL installation failed or isn't working properly. PostgreSQL is installed us...
cloudera manager CCAH
我是一位大数据方向的大四在校生,由于实习公司最近在使用cloudera 搭建hadoop集群,才深知自己对Hadoop的认知是多么的肤浅,所以萌生了 考CCAH的想法,话说开头万事难,所以希望有对CCAH的了解的可以给予一些建议和分享一些自己的心得,再次深表感谢。
大数据平台cloudera manager安装
主节点是 server,其他节点是 agent 1:apache服务器       sudo rpm -qa|grep http       sudo service httpd status       sudo service httpd start   sudo chkconfig httpd on 访问 : bigdata-cdh01.ibeifeng.
相关热词 c# login 居中 c# 考试软件 c# 自然语言分析 c# 分段读取文件 c# 泛型反射 c#打断点 c# 时间转多少秒 c# 线程函数加参数 c# modbus 读取 c#查询集合表