我用local来跑的话是ok的 但是用yarn来跑就出错了
我的hadoop是部署在虚拟机上的
下面贴报错代码
我已经按照报错提示的将一些参数设置好了
但是还是报这个错
是在找不到眉目 我贴一下我yarn上传的代码片段吧
希望大佬们能帮个忙
hadoop3.1.1 使用idea提交wordcount任务到yarn上报错
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
- 2020-05-18 20:39回答 1 已采纳 https://blog.csdn.net/fenghuibian/article/details/88809962
- 2022-05-11 23:43回答 4 已采纳 依赖没有导入成功。
- 2021-11-18 09:16回答 2 已采纳 不是提示要有输入（IN）和输出（OUT）么你这个参数 /hdfs/test/wctest.txt/hdfstest/output 中间没有空格不应该是 /hdfs/test/wctest.t
- 2020-12-04 16:05积极流年的博客 我们这里用自带的示例程序来运行wordcount，从而来演示Hadoop的功能。/home/cndba/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.1.jarhttps://www.cndba.cn/dave/article/3260 ...
- 2018-11-07 13:10回答 2 已采纳 sum += value.get(); -> sum = 1; break;
- 2021-12-04 16:26回答 1 已采纳 你代码中获取了args中的参数，这个是需要配置的。如果觉得麻烦，直接将代码中涉及args[]取值的地方替换为具体的值。 idea中运行args作为接收参数的程序_Luke
- 2021-10-01 14:09回答 1 已采纳 不至于吧，很明显已经给你提示了hdfs://master:8020/user/root/wcinput不存在，你仔细检查hdfs上这个路径是否存在，另外这是输入，你为啥写文件夹，而不是精确到文件？
- 2018-12-13 11:23会飞的猩猩。的博客 搭建好了Hadoop以后，用一个大家都常用的WordCount例子来试一试。 下面是WordCount的代码： import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.conf.Configuration; ...
- 2022-05-15 19:13回答 1 已采纳 之前碰到过这个报错，当时修改pom文件添加了一个依赖 <dependency> <groupId>org.apache.hadoop</groupId>
- 2021-11-04 17:38
Hadoop 分布式系统中 yarn集群启动时报错 node03: ERROR: Cannot set priority of resourcemanager process 1615
hadoop
hive
yarn
回答 3 已采纳 你这是伪分布式还是完全分布式?先试试格式化namenode : hdfs namenode -format重新启动：hadoop-daemon.sh start namenodehadoop-dae - 2022-04-04 22:57回答 2 已采纳 本地执行需要去掉，依赖范围provided，可以查看我的微博，flink专栏
- 2024-01-21 10:12JP.Hu的博客 Hadoop 3.1.1 YARN 集群部署依赖服务系统优化查看 ZooKeeper 集群状态创建路径配置 /etc/profile配置 \$/HADOOP\_HOME/etc/hadoop/yarn-env.sh配置 \$/HADOOP\_HOME/etc/hadoop/mapred-site.xml创建 NodeManager 黑...
- 2022-03-23 16:55回答 1 已采纳 是端口号的问题吗你将报错的信息百度一下
- 2018-12-11 10:11weixin_33882443的博客 Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster Please check whether your etc/hadoop/mapred-site.xml contains the below configuration: <property...
- 2020-04-28 19:41xlee2012的博客 hadoop3.1.1上运行WordCount步骤总结 1、首先搭建好Hadoop集群 集群搭建：详见 2、下面展示一些操作步骤 hdfs 常用命令: 详见 hdfs常用命令说明 [root@master hadoop-3.1.1]# hdfs dfs -mkdir rootDir [root@master ...
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 请教一下各位，为什么我这个没有实现模拟点击
- ¥15 执行 virtuoso 命令后，界面没有，cadence 启动不起来
- ¥50 comfyui下连接animatediff节点生成视频质量非常差的原因
- ¥20 有关区间dp的问题求解
- ¥15 多电路系统共用电源的串扰问题
- ¥15 slam rangenet++配置
- ¥15 有没有研究水声通信方面的帮我改俩matlab代码
- ¥15 ubuntu子系统密码忘记
- ¥15 保护模式-系统加载-段寄存器
- ¥15 电脑桌面设定一个区域禁止鼠标操作