Hive的MR引擎或者Tez引擎中reduce的数量到底是由什么决定的？

理论上来说，不是说一种key对应一个reduce吗，但是为什么我这样跑一个任务，对应的key应该是data_dt吧，但是data_dt也没有1000多个呀，为什么有1000多个reduce呢？

报告相同问题？

提交关注问题

Hive的MR引擎或者Tez引擎中reduce的数量到底是由什么决定的？ hadoop hive mr 有问必答
2022-03-27 10:00

回答 2 已采纳可以设置reduce的参数的set mapreduce.reduce.tasks可以直接设置有多少个task 如果没有指定reduce个数，通过hive.exec.reduces.bytes.per
hive使用Tez引擎失败 hadoop hive java 有问必答
2021-08-17 11:37

回答 2 已采纳关闭所有进程，将配置文件里的所有的中文注释全部删除，记得全部删除，然后保存，完成后从新启动，再次尝试你的操作
MySQL在hive使用的过程中的作用是什么？ mysql
2019-03-07 10:29

回答 3 已采纳资源库的角色。hive不也是属于数据仓库嘛，他的数据文件是放在HDFS上，但是他的配置信息是放在资源库上，也就是mysql。比如说表结构等等。相当于'后宫'，我是这么理解的。
Hive_引擎MR、Tez、Spark
2021-08-20 14:28

大数据翻身的博客 Hive引擎包括：默认MR、Tez、Spark 不更换引擎hive默认的是MR。 Hive on Spark：Hive既作为存储元数据又负责SQL的解析优化，语法是HQL语法，执行引擎变成了Spark，Spark负责采用RDD执行。 Spark on Hive : Hive只...
Hive 基于Tez引擎 map和reduce数的参数控制原理与调优经验
2022-03-25 21:06

是个好男人呀的博客 Hive on Tez的引擎调优基于Map数和Reduce数的调优
没有解决我的问题, 去提问