你隔壁的小王 2022-02-09 08:07 采纳率: 100%
浏览 129
已结题

Hadoop集群搭建时问题

问题遇到的现象和发生背景

我配置完的hadoop集群 想通过脚本运行 但是脚本实在低权限账户里的 运行之后出现报错 前边的报错我加了AUTO 但还是报错

问题相关代码,请勿粘贴截图

#!/bin/bash

if [ $# -lt 1 ]
then
echo "No Args Input..."
exit ;
fi

case $1 in
"start")
echo " =================== 启动 hadoop集群 ==================="

    echo " --------------- 启动 hdfs ---------------"
    ssh hadoop102 "/opt/module/hadoop-3.1.3/sbin/start-dfs.sh"
    echo " --------------- 启动 yarn ---------------"
    ssh hadoop103 "/opt/module/hadoop-3.1.3/sbin/start-yarn.sh"
    echo " --------------- 启动 historyserver ---------------"
    ssh hadoop102 "/opt/module/hadoop-3.1.3/bin/mapred --daemon start historyserver"

;;
"stop")
echo " =================== 关闭 hadoop集群 ==================="

    echo " --------------- 关闭 historyserver ---------------"
    ssh hadoop102 "/opt/module/hadoop-3.1.3/bin/mapred --daemon stop historyserver"
    echo " --------------- 关闭 yarn ---------------"
    ssh hadoop103 "/opt/module/hadoop-3.1.3/sbin/stop-yarn.sh"
    echo " --------------- 关闭 hdfs ---------------"
    ssh hadoop102 "/opt/module/hadoop-3.1.3/sbin/stop-dfs.sh"

;;
*)
echo "Input Args Error..."
;;
esac

运行结果及报错内容

=日aarEaa启动hadoop集群a::AAE--…-----------启动hdfs ---------------
Starting namenodes on [hadoop102]
ERROR: Attempting to operate on hdfs namenode as root
ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation.Starting datanodes
ERROR: Attempting to operate on hdfs datanode as root
ERROR: but there is no HDFS_DATANODE_USER defined. Aborting operation.Starting secondary namenodes [hadoop104]
ERROR: Attempting to operate on hdfs secondarynamenode as root
ERROR: but there is no HDFS_SECONDARYNAMENODE_USER defined. Aborting operation.------- --------启动yarn ------- -- ----
starting resourcemanager
ERROR: Unable to write in /opt/module/hadoop-3.1.3/logs. Aborting.Starting nodemanagers
hadoop103: ERROR:Unable to write in /opt/module/hadoop-3.1.3/logs. Aborting.hadoop104: ERROR: Unable to write in /opt/module/hadoop-3.1.3/logs.Aborting.hadoop102: ERROR: Unable to write in /opt/module/hadoop-3.1.3/logs. Aborting.------- - -------启动historyserver ---------------
ERROR:Unable to write in /opt/module/hadoop-3.1.3/logs.Aborting.「ai0hadnnn102 bin 1c.

我的解答思路和尝试过的方法

是我前边配置的时候在哪把root和低权限账号弄混了么,我尝试重置集群没有解决,有什么解决办法么

我想要达到的结果
  • 写回答

1条回答 默认 最新

  • IT阿沈 2022-02-09 09:48
    关注

    题主的hadoop102 和 hadoop103 应该没有开sudo 对吧,直接使用ssh进行命令的启动恐怕是不行的,可以尝试写一个跳转的shell到每个node中进行sudo启动,关于sudo权限的添加你可以参考下面的指令:
    root 下执行:
    usermod hadoop102 -a -G sudo

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 2月21日
  • 已采纳回答 2月13日
  • 创建了问题 2月9日

悬赏问题

  • ¥15 对于这个复杂问题的解释说明
  • ¥50 三种调度算法报错 采用的你的方案
  • ¥15 关于#python#的问题,请各位专家解答!
  • ¥200 询问:python实现大地主题正反算的程序设计,有偿
  • ¥15 smptlib使用465端口发送邮件失败
  • ¥200 总是报错,能帮助用python实现程序实现高斯正反算吗?有偿
  • ¥15 对于squad数据集的基于bert模型的微调
  • ¥15 为什么我运行这个网络会出现以下报错?CRNN神经网络
  • ¥20 steam下载游戏占用内存
  • ¥15 CST保存项目时失败