我可以为map定义不同的编号并减少每个节点的插槽吗?

时间:2014-12-30 22:24:01

标签: hadoop mapreduce

我想知道我是否可以为hadoop集群中的每个节点定义不同数量的插槽 例如:tasktracker1:2 map和2减少
        tasktracker2:1地图和1减少
        等等...

或者我必须为集群中的所有节点设置插槽数

非常感谢,

注意:我使用hadoop版本:1.2.1,因为它是最新的稳定版本但是如果有任何版本可以做到这一点请告诉我有关

1 个答案:

答案 0 :(得分:1)

查看mapreduce.tasktracker.map.tasks.maximummapreduce.tasktracker.reduce.tasks.maximum。它们都设置在mapred-site.xml

在hadoop中的地图缩减作业配置中可以使用many configuration parameters。有些取决于您使用的版本。