cloudera集群安装总是出现如下错误: 20C

图片说明
图片说明

[09/Aug/2017 17:01:13 +0000] 9573 MainThread agent ERROR Failed to connect to previous supervisor.

Traceback (most recent call last):

File "/usr/lib64/cmf/agent/build/env/lib/python2.6/site-packages/cmf-5.8.0-py2.6.egg/cmf/agent.py", line 2038, in find_or_start_supervisor

self.configure_supervisor_clients()

File "/usr/lib64/cmf/agent/build/env/lib/python2.6/site-packages/cmf-5.8.0-py2.6.egg/cmf/agent.py", line 2222, in configure_supervisor_clients

supervisor_options.realize(args=["-c", os.path.join(self.supervisor_dir, "supervisord.conf")])

File "/usr/lib64/cmf/agent/build/env/lib/python2.6/site-packages/supervisor-3.0-py2.6.egg/supervisor/options.py", line 1578, in realize

Options.realize(self, *arg, **kw)

File "/usr/lib64/cmf/agent/build/env/lib/python2.6/site-packages/supervisor-3.0-py2.6.egg/supervisor/options.py", line 312, in realize

self.process_config()

File "/usr/lib64/cmf/agent/build/env/lib/python2.6/site-packages/supervisor-3.0-py2.6.egg/supervisor/options.py", line 320, in process_config

self.process_config_file(do_usage)

File "/usr/lib64/cmf/agent/build/env/lib/python2.6/site-packages/supervisor-3.0-py2.6.egg/supervisor/options.py", line 355, in process_config_file

self.usage(str(msg))

File "/usr/lib64/cmf/agent/build/env/lib/python2.6/site-packages/supervisor-3.0-py2.6.egg/supervisor/options.py", line 143, in usage

self.exit(2)

SystemExit: 2

每次都出现这样的错误,SELinux和防火墙均关闭,9000和9001端口均空闲

1

1个回答

确认 /etc/hosts 主机名映射没有问题,主机名0-9a-z- 不支持._等其他符号

0
Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
Cloudera Manager搭建集群服务器启动失败
问题:       cloudera manager搭建集群的服务器暂停一段时间后,启动失败。解决办法:       可能是因为server和agent没有启动在Linux下启动server和agent,重启监控界面的服务即可。此处需要注意的是,有些组件对集群的时间要求比较高,例如HBase,如果遇到关于HBase的以下错误,可以尝试着同步以下集群的时间。       同步时间之后,监控界面重启H...
CDH安装时出现的坑
一、mysql修改简单密码 mysql> set password = password('1234');#设置密码报错:ERROR 1819 (HY000): Your password does not satisfy the current policy requirements首先,修改validate_password_policy参...
大数据cloudera集群部署安装详解
centos7环境下部署cloudera大数据。 节点名称 IP 配置 说明 Manager-node 192.168.42.100 4C/8G/100G 管理节点 Agent1-node 192.168.42.101 8C/32G/1T 数据节点 Agent2-node 192.168.42.102 8C/32G/1...
集群安装(一)Cloudera Manager离线部署CDH
Cloudera Manager离线部署CDH文档 一、说明 二、系统环境搭建 1、网络配置(所有节点) 2、SSH免密码登录 3、关闭防火墙 4、关闭SELINUX 5、安装JDK 6、设置NTP 7、安装配置MySql 8、下载依赖包 三、Cloudera Manager Server&Agent安装 1、安装Cloudera Manager Server&Agent...
基于Docker 搭建Cloudera 大数据环境 并在CM中集成Kafka
一 基于docker搭建clouderaClouder 官方文档:https://www.cloudera.com/documentation/enterprise/5-6-x/topics/quickstart_docker_container.html英文文档,英语基础好的同学直接照着步骤做就好了。1 拉取cloudera 镜像docker pull cloudera/quickstart:l...
cloudera manager 安装cdh 搭建大数据集群,详细讲解核心
该文档详细讲解了cloudera manager安装cdh步骤,作者看了官方文档不下千次,呕心沥血整理,非常详细,以及各种安装方法的核心优缺点
在阿里云服务器ECS上用Cloudera搭建集群(随记)
阿里云购买的三台机器,学习用的,所以基本上资源都是按最低买的,按流量时长计费,也花不了多少钱,并且一个账户下的机器不用配置,直接能ping通 三台机器Slave2是我最早买的,安装的环境都是是 CentOS 7.3 64位 修改主机名 hostnamectl set-hostname master hostnamectl set-hostname slave1 hos
CDH5(Cloudera5.7.1)集群安装
CDH5.7.1离线安装 文章来源:http://blog.csdn.net/a921122/article/details/51939692 CDH (Cloudera’s Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境。  Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务
[解决] Cloudera Manager安装锁的问题
[解决] Cloudera Manager安装锁的问题
Cloudera集群初始搭建
2017 08 04 版本 初始1.0 (受用之后的一赞,将是鄙人持久的动力) 目录 一,集群规划 二,linux系统环境准备 1,安装linux centos6.5 2,配置网络 3,增加普通用户 4,配置普通用户的sudo权限 5,关闭防火墙 6,禁用Selinux 7, 设置文件打开数量和用户最大进程数 8,yum源跟换和添加 9,卸载Centos自带的JD...
cloudera manager 5.7 安装配置以及一些注意事项
groupadd mysqluseradd -M -g mysql -s /sbin/nologin -d /usr/local/mysql  mysqltar xf /opt/mysql-5.6.34-linux-glibc2.5-x86_64.tar.gz  -C /usr/local/cd /usr/local/ln -s mysql-5.6.34-linux-glibc2.5-x86_64...
cloudera CDH5 Hadoop集群全套安装部署流程
本文详细地写了如何用virtualbox虚拟机虚拟出两个节点并搭建Hadoop集群。 借助cloudera manager完成集群的搭建。 包括虚拟机安装Linux后的配置和克隆虚拟机的网卡配置, 时间同步,还有mysql数据库管理cloudera的各个用户。
Cloudera Hadoop 集群安装(三台机器)
简述:Hadoop的安装对环境有比较高的要求,需要比较大的内存,一般的机器很难满足,一个人也很难有两三台独立的主机,所以只能选择使用安装虚拟机的方式安装,但是主机的内存需要在8G以上。如果小于8G可以扩展内存后再做尝试。         公司使用的hadoop一般都不是apache下的hadoop,而是cloudera公司的hadoop,因为它除了提供hadoop外还提供了集成工具,所以,今天也
cdh-使用Cloudera Manager更改高可用HDFS的名称服务名称
使用Cloudera Manager更改高可用HDFS的名称服务名称 有关HDFS名称空间和HDFS高可用性的背景信息,请参阅使用Cloudera Manager管理联合名称服务和启用HDFS HA 1停止除ZooKeeper之外的所有服务。 2在ZooKeeper服务器主机上,运行zookeeper-client。 执行以下操作删除配置的名称服务。这个例子假设nameservice的名...
从yum安装Cloudera CDH集群
记录使用yum通过rpm方式安装Cloudera CDH中的hadoop、yarn、HBase,需要注意初始化namenode之前需要手动创建一些目录并设置权限。 0.环境准备 1.设置hosts 临时设置hostname,以node1为例 sudo hostname node1 确保/etc/hosts中包含ip和FQDN,如果你在使用DNS,保存这些信息到/et
CDH5.11安装详解
1.1.环境搭建所需安装文件表 项目名称 包名 Liunx系统: CentOS-7-x86_64-Minimal-1511 JDK: jdk-8u131-linux-x64.tar.gz MySQL文件: compat-mysql51-5.1.73-1.el6.remi.x86_64.rpm mysql-connector-java-5.1.46-bin.jarMySQL-...
docker系列9: docker安装cdh集群[单机多节点]
继上篇 docker系列3:docker搭建cdh单机版, 只有一个节点,若想搭建多节点集群,可以参考官方文档:https://hub.docker.com/r/cloudera/clusterdock 1, 运行脚本:启动容器 # docker-cdh集群:单机模拟多节点 source /dev/stdin <<< "$(curl -sL http://
cloudera manager搭建的时候出现postgres的错误的解决办法
Cloudera Manager 5(以下简称CM)默认采用在线安装的方式,给不能联互联网或者网络不畅的用户带来了不便,由于网络问题,屡装屡败的挫折感,让初次学习CDH用户真心体验到万事开头难。本文讲解了在CentOS 6环境下搭建本地Yum软件源,局域网内的用户在完全不连互联网的情况下,完成CM的安装。让安装CM的用户体验到一路next,然后finish的顺畅感,速度是用户的第一体验。一、搭建C...
Cloudera 向集群添加主机
本文将概述使用Cloudera Manager向集群中添加主机的操作。首先,我们这里是采用的离线安装模式安装的,所以对于你新的主机你必须配置好如下几个内容: 安装好JDK 安装好Cloudera Manager Agent 配置Agent指向Server 操作流程Created with Raphaël 2.1.0添加节点在CM界面选择主机向集群添加新主机选择管理的主机(确保你已经配好了Agent服
如何在CDH中安装和使用StreamSets
源文档 https://cloud.tencent.com/developer/article/1078852 1.关于StreamSets StreamSets由Informatica前首席产品官Girish Pancha和Cloudera前开发团队负责人Arvind Prabhakar于2014年创立。他们成立该公司主要是应对来自动态数据(data in motion)的挑战 - 包括数据源,...
Cloudera CDH 5不关闭防火墙方案
如果CDH集群需要和外界连接,往往会害怕不启动防火墙会把端口暴露在危险之中。 所以可以启用iptables并设置开启端口白名单。 CDH官网提供了详细的端口列表: https://www.cloudera.com/documentation/cdh/5-1-x/CDH5-Installation-Guide/cdh5ig_ports_cdh5.html https://www.clou
安装Cloudera Manager集群时首次运行命令部署客户端设置失败的解决办法(图文详解)...
      不多说,直接上干货!         问题详情                解决办法    (1) 时间同步检查下(尤其是这个)          (2) 防火墙是否关闭          (3) cloudera-scm-server 和 cloudera-scm-agent 是否启动                 ...
Cloudera Manager 和CDH6.0.1安装,卸载,各步骤截图(此博文为笔者辛苦劳作最终生成的,使用了3个熬到凌晨2~4点的夜晚,外加一个周末完成,请转载时记录转载之处,谢谢)
1 Cloudera 文档总地址 https://www.cloudera.com/documentation/enterprise/6/6.0.html 2 Cloudera Manager 和CDH下载地址 Cloudera Manager下载地址: https://archive.cloudera.com/cm6/6.0.1/redhat7/yum/RPMS/x86_64/ 下载上线的r...
CM(CDH)的安装过程破解(含卸载)--自己可以随意怎么安装都行了
【以下是基于CM 5.8的分析】把cloudera-manager-installer.bin文件改名为:cloudera-manager-installer.zip 解压:unzip cloudera-manager-installer.zip(注意,不要在windows上这么干,解压出来的是一个乱码文件,至于为啥,懒的研究了。)看解压后的文件,可以知道它是用lua写的。打开config.lua
CDH5.13.1 离线安装
踩了很多坑,具体多少我都忘记了。搞完之后弄个帖子一是记录,二是分享。 之所以选择离线安装,是因为公司的网络不太稳定,单下个CM都要好久,更别提后面的CDH了,而且还容易网络中断。 准备工作(一些简单且容易百度到的,就不赘述了): 1. 所有主机的/etc/hosts 文件的 ip  主机名绑定 2.所有主机之间免密码登录 3. 配置ntp服务,主节点对外同步时间,其他节点向主节点同步时间
Cloudera-Manager安装意外中断如何卸载的问题
问题描述: 使用Cloudera-Manager-Installer.bin安装过程中,意外中断。当你重新安装时,提示已经安装了CM,请先卸载。 尝试使用 sudo /usr/share/cmf/uninstall-cloudera-manager.sh命令卸载失败,提示找不到 mojosetup/mojosetup文件 解决方法: 1.运行以下命令,然后就可以重新安装  sudo
Hadoop之Cloudera Manager安装问题总结【转】
安装过程中,由于网络终端,导致下面问题:问题1:安装停止在获取安装锁 /tmp/scm_prepare_node.tYlmPfrT using SSH_CLIENT to get the SCM hostname: 172.16.77.20 33950 22 opening logging file descriptor 正在启动安装脚本...正在获取安装锁...BEGIN ...
cdh时间同步遇到的坑
之前装的cdh集群时间同步用的是chrony确实能够同步成功但是过了几天又报错时间不同步date一下时间一样找不到问题只好又重新启动chrony再次进行同步,配置定时任务没有生效。 以下介绍两种时间同步的方法(推荐使用ntp时间同步) 1.使用chrony配置时间同步步骤: 首先将服务器端时间设置为当前时间 date -s "1990-00-00 00:00:00" 服务器端 1)v...
cdh集群安装sqoop
sqoop-cdh安装:1、上传sqoop-1.4.6-cdh5.10.1.tar.gz包到/opt/sqoop目录2、解压缩文件: tar -zxf sqoop-1.4.6-cdh5.10.1.tar.gz3、设置环境变量:vim /etc/profile#添加一下内容export JAVA_HOME=/usr/java/jdk1.7.0_79export CLASSPATH=.:$JAVA_H...
Cloudera Manager一步步详细部署文档(离线parcels存储库方式)
Cloudera Manager安装手册(离线parcels存储库方式),基于CentOS操作系统一步步傻瓜式安装,截图记录整个部署过程。带集群功能验证,检查集群是否正常工作 目录 一、文档内容 3 二、软硬件环境 3 2.1.软件信息 3 2.2.硬件信息 4 三、集群部署流程 5 3.1.管理结点部署 5 3.1.1 环境准备 5 3.1.2 CDH软件套件下载及配置 6 3.2.工作结点部署 9 3.2.1 环境准备 9 3.2.2 配置迁移 10 四、集群创建与验证 11 4.1创建集群 11 4.2 验证集群 22 4.2.1.MapReduce验证 22 4.2.2.Hive验证 24
CDH自动化部署--如何通过CM API创建一个集群
要想实现CDH自动化部署,第一步就是创建集群(Cluster),这篇文章讲的就是如何通过cm java api创建一个cluster。 第一步,先要配置好POM文件,引入CM API <!-- CDH官方的REPO --> <repositories> <repository> ...
MongoDB集群搭建的整理及出错整理
之前搭建过集群,现在重新搭建,竟然花费了我一晚上时间,不就这边出错,就是那边少东西,头疼,还是趁热打铁,出一份完整的搭建教程 一、几个比较常用的linux语句: 1、查看主机的线程: ps aux|grep mongo (查看mongo线程) kill XX(杀死线程) 2、新建文件及文件夹: touch XX(新建文件) mkdir XXX(新建文件夹) 3、删除文件及文件夹;
[CDH5] 集群删除主机
1. CM主页 - 主机 - 所有主机,勾选要删除的主机 - 停止主机上的角色;2. 登录到要被删除的主机,停掉agent服务;    已经设置了开机自启动的,要disable掉。3. 回到CM主页 - 主机 - 所有主机,勾选要删除的主机 - 从集群中删除;4. 再次勾选要删除的主机 - Remove Hosts from Cloudera Manager。...
关于cdh安装过程中的遇见的一些问题以及解决办法的总结
注意:这篇文章是我搭建之后过了两天才来写的,所以这里有点泛化,没有很强的针对性,只供大家一个参考的方向。 问题一: 启动Cloudera的agent报:Cloudera-scm-agent dead but pid file exist  解决的办法思路: 方法一: 可以先参考这篇博客文章来进行操作:http://blog.csdn.net/DViewer/article/details/5
Cloudera Manager安装主机节点选不中
1, 安装集群,部分节点没办法选中,显示节点不受管。 解决方法: (1) 打开Cloudera server节点/etc/cloudera-scm-server/db.properties的文件,可以看到Cloudera manager的配置文件。           数据库名为scm,用户名为scm。     (2)用如下命令登录Cloudera server节点的postgresql数
正确的方法,在CDH集群中部署Kafka Manager
第一步:git clone https://github.com/yahoo/kafka-manager.git 第二步:cd kafka-manager/ 第三步:./sbt clean dist           时间较长,南信等待 第四步:cd  /data/disk1/kafka-manager/target/universal 第五步:cp kafka-manager-1....
Cloudera Manager 安装提示: 卡在正在获取安装锁..
解决方案 rm -rf /tmp/scm_prepare_node.* rm -rf /tmp/.scm_prepare_node.lock
大数据部署离线安装CDH操作指南(环境准备+Cloudera manager安装+CDH部署)
自己整理的CDH离线部署安装指南,可依据此部署步骤开发一键部署脚本程序,从而省去手动部署敲命令的繁琐过程。由于一键部署包好几个G,就不发出来了。
CDH5实践(四)Cloudera Manager 5安装中碰到的一些问题和解决办法
问题一:安装过程中会出现失败,查看detail信息中,提示 host 无法连接 解决:前面的文章中漏了对主机host的一个修改, 除了修改 /etc/hosts 文件外,我们还需要修改修改  /etc/sysconfig/network 文件,并且需要重启才能生效。 问题二:CDH5 安装中,hive和monitor host 都需要数据库,除了postgresql外,是否可以
Cloudera简介和安装部署概述
最近作者在研究Cloudera,并且在自己的虚拟机集群安装部署成功,所以在此做个分享,帮助大家尽快构建自己的Cloudera环境并运用起来。文章将会对Cloudera以及其安装时涉及到的组件做一个简单的介绍,并把官方文档中介绍的3种安装部署方式做一个概要的说明。
文章热词 机器学习教程 Objective-C培训 交互设计视频教程 颜色模型 设计制作学习
相关热词 mysql关联查询两次本表 native底部 react extjs glyph 图标 cloudera大数据培训 深度学习ufldl教程教程如下