Mapreduce中的失败/杀死的任务花费的时间太长,无法开始下一次尝试

时间:2018-10-15 20:17:13

标签: hadoop mapreduce yarn

首次执行Mapreduce任务(已杀死),ResourceManager UI上显示的完成时间-“周五10月12日08:50:17 -0700”。显示已完成100%。

被杀死的原因是-“ TaskAttempt被杀死,因为它在不可用的节点nodemanger1:8041上运行”

同一任务的下一次成功尝试始于-“周五10月12日11:39:07 -0700”

根据应用程序主日志,该任务在“ 2018-10-12 11:39:05,003”处被杀死。下面是特定任务的应用程序主日志的摘要:

["source1", "source2"]

您能否建议在时间“ 08:20”到“ 11:39”(大约3小时20分钟)之间发生了什么,这导致工作延迟。

0 个答案:

没有答案