job.setNumReduceTasks(2);
这样设置reduce个数无效,调试发现始终只有一个reduce任务,输出文件也就只有一个part-r-00000,如果加一句System.out.println(job.getNumReduceTasks());会发现打印出来的“NumReduceTasks”的确是2,但实际运行结果始终只有一个。
如果不在eclipse中运行,生成jar包运行也是一样。
网上有人说是伪分布模式或者单机模式就会这样,但我不是这种模式,我用虚拟机建了集群的。
请问这是怎么回事?
mapreduce的reduce个数设置无效,始终只有一个reduce任务,输出的文件也只有一个
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
2条回答 默认 最新
悬赏问题
- ¥15 微信会员卡等级和折扣规则
- ¥15 微信公众平台自制会员卡可以通过收款码收款码收款进行自动积分吗
- ¥15 随身WiFi网络灯亮但是没有网络,如何解决?
- ¥15 gdf格式的脑电数据如何处理matlab
- ¥20 重新写的代码替换了之后运行hbuliderx就这样了
- ¥100 监控抖音用户作品更新可以微信公众号提醒
- ¥15 UE5 如何可以不渲染HDRIBackdrop背景
- ¥70 2048小游戏毕设项目
- ¥20 mysql架构,按照姓名分表
- ¥15 MATLAB实现区间[a,b]上的Gauss-Legendre积分