我想知道我是否可以为hadoop集群中的每个节点定义不同数量的插槽
例如:tasktracker1:2 map和2减少
tasktracker2:1地图和1减少
等等...
或者我必须为集群中的所有节点设置插槽数
非常感谢,
注意:我使用hadoop版本:1.2.1,因为它是最新的稳定版本但是如果有任何版本可以做到这一点请告诉我有关
答案 0 :(得分:1)
查看mapreduce.tasktracker.map.tasks.maximum
和mapreduce.tasktracker.reduce.tasks.maximum
。它们都设置在mapred-site.xml
。
在hadoop中的地图缩减作业配置中可以使用many configuration parameters。有些取决于您使用的版本。