减速器失败了

时间:2017-02-27 11:30:33

标签: apache hadoop mapreduce

我们正在使用3个集群机器和mapreduce.tasktracker.reduce.tasks.maximum属性设置为9.当我设置的reducer等于或小于9时,作业成功但如果我设置大于9则它失败了,例外情况“任务尝试_201701270751_0001_r_000000_0无法ping掉TT 60秒。杀死!”。任何人都可以指导我将会出现什么问题

1 个答案:

答案 0 :(得分:0)

似乎在hadoop -0.20中存在一些错误。

https://issues.apache.org/jira/browse/MAPREDUCE-1905(供参考)。

你能否尝试增加任务超时?

(mapreduce.task.timeout到更高的值)( 0将禁用超时