想请教下,mapreduce的内存遵循什么原则或计算公式配置,比如说我电脑本机内存16g,开3台虚拟机构成集群,每台虚拟机分配3g内存。那么我mapreduce配置文件中相关参数该配多少内存?
我内存参数都不配,使用默认的情况下,当数据量上去了,读取mongo数据1000条就会开始报错了。
想请教下,mapreduce的内存遵循什么原则或计算公式配置,比如说我电脑本机内存16g,开3台虚拟机构成集群,每台虚拟机分配3g内存。那么我mapreduce配置文件中相关参数该配多少内存?
我内存参数都不配,使用默认的情况下,当数据量上去了,读取mongo数据1000条就会开始报错了。