hadoop - 我可以为每个节点定义不同的 map 和 reduce 插槽吗？

Question

我想知道是否可以为 hadoop 集群中的每个节点定义不同数量的槽。
例如:tasktracker1:2 个 map 和 2 个 reduce
tasktracker2:1 个映射和 1 个缩减
等等……

或者我必须为集群中的所有节点设置槽数

非常感谢，，

注意:我使用 hadoop 版本:1.2.1，因为它是最新的稳定版本，但如果有任何版本可以做到这一点，请告诉我

Answer 1

看看 mapreduce.tasktracker.map.tasks.maximum 和 mapreduce.tasktracker.reduce.tasks.maximum。它们都在 mapred-site.xml 中设置。

有many configuration parameters在 hadoop 中的 map reduce 作业的配置中使用。有些取决于您使用的版本。