分布式配置zookeeper环境

Question

配置后，发现hadoop100显示没有zkServer文件或目录，hadoop101和102没有权限，都运行不出来

Answer 1

上午好☀️☀️☀️️
本答案参考通义千问

你遇到的问题是关于 ZooKeeper 在分布式环境中的配置问题，特别是在运行 ZooKeeper 时出现以下两个主要错误：

1. hadoop100 显示没有 zkServer 文件或目录
2. hadoop101 和 hadoop102 没有权限，无法运行

下面我将详细分析这两个问题，并提供解决方案。

---

🧠 问题分析

1. hadoop100 没有 zkServer 文件或目录

这表明 ZooKeeper 的安装路径不正确 或者 未正确解压/编译 ZooKeeper 源码。zkServer.sh 是 ZooKeeper 的启动脚本，通常位于 bin/ 目录下。

2. hadoop101 和 hadoop102 没有权限，无法运行

这可能是由于 文件权限设置不正确（如 chmod 设置），或者 ZooKeeper 配置中主机名或 IP 地址不匹配，导致无法在这些节点上启动服务。

---

✅ 解决方案

一、确保 ZooKeeper 安装完整

1. 下载并解压 ZooKeeper

wget https://downloads.apache.org/zookeeper/zookeeper-3.7.0/zookeeper-3.7.0.tar.gz
tar -zxvf zookeeper-3.7.0.tar.gz -C /usr/local/
cd /usr/local/zookeeper-3.7.0

2. 创建配置文件

cp conf/zoo_sample.cfg conf/zoo.cfg

编辑 conf/zoo.cfg 文件：

vi conf/zoo.cfg

添加以下内容（根据你的集群情况修改）：

tickTime=2000
dataDir=/var/zookeeper
clientPort=2181
server.1=hadoop100:2888:3888
server.2=hadoop101:2888:3888
server.3=hadoop102:2888:3888

注意： server.x 中的 x 应该与 myid 文件中的数字一致。

3. 创建 myid 文件

在每台机器上创建 /var/zookeeper/myid 文件：

• hadoop100:

  echo "1" > /var/zookeeper/myid
  

• hadoop101:

  echo "2" > /var/zookeeper/myid
  

• hadoop102:

  echo "3" > /var/zookeeper/myid
  

重点： 确保每个节点的 myid 文件内容唯一且与 zoo.cfg 中的 server.x 对应。

---

二、检查权限问题

1. 修改 ZooKeeper 安装目录权限

chown -R hadoop:hadoop /usr/local/zookeeper-3.7.0
chmod -R 755 /usr/local/zookeeper-3.7.0

重点： 确保所有节点上的用户权限一致，尤其是 zkServer.sh 脚本需要可执行权限。

2. 确保 zkServer.sh 可执行

chmod +x /usr/local/zookeeper-3.7.0/bin/zkServer.sh

---

三、在每台机器上启动 ZooKeeper

/usr/local/zookeeper-3.7.0/bin/zkServer.sh start

重点： 在每台机器上都要执行此命令，确保 ZooKeeper 正确启动。

---

四、验证 ZooKeeper 是否正常运行

1. 查看进程

jps

你应该看到 QuorumPeerMain 进程。

2. 使用客户端连接

/usr/local/zookeeper-3.7.0/bin/zkCli.sh -server hadoop100:2181

---

🔍 常见错误排查

| 错误提示 | 原因 | 解决方案 | |----------|------|----------| | No such file or directory: zkServer.sh | ZooKeeper 安装路径错误或未解压 | 重新下载并解压 | | Permission denied | 权限不足 | 修改目录权限 chmod | | Connection refused | 网络不通或配置错误 | 检查 zoo.cfg 中的 IP 和端口 | | Not a valid jar | Java 环境问题 | 安装 JDK 并设置 JAVA_HOME |

---

📦 最终建议

• 确保所有节点时间同步（使用 NTP）。
• 确保所有节点可以互相 ping 通。
• 检查防火墙是否关闭或开放 2181、2888、3888 端口。
• 如果使用非 root 用户，请确保用户对 ZooKeeper 目录有读写权限。

---

🧾 代码示例（配置文件）

conf/zoo.cfg 示例：

tickTime=2000
dataDir=/var/zookeeper
clientPort=2181
server.1=hadoop100:2888:3888
server.2=hadoop101:2888:3888
server.3=hadoop102:2888:3888

---

如果你还有其他问题，比如 zkServer.sh 启动失败、无法连接等，欢迎继续提问！