如何查看Hadoop流的更具描述性的错误消息?

时间:2013-09-03 13:27:29

标签: hadoop streaming

我通过Hadoop使用hadoop-streaming-1.0.3.16.jar流媒体界面。

我的地图任务失败并显示以下消息:

ERROR streaming.StreamJob: Job not successful. Error: # of failed Map Tasks exceeded allowed limit. FailedCount: 1. LastFailedTask: <task id>

我没有其他诊断。

我正在使用以下选项运行map-reduce流媒体任务:

  • file -mapper
  • file -reducer
  • 输入/ user / ME / INPUT_FILE
  • output / user / ME / OUTPUT_FILE

如何更好地(某些!)诊断地图任务失败的原因?

0 个答案:

没有答案