作业历史记录文件

时间:2012-06-15 08:37:03

标签: logging hadoop hadoop-streaming

我有使用hadoop vaidya工具的程序。 http://hadoop.apache.org/mapreduce/docs/r0.21.0/vaidya.html

$HADOOP_HOME/contrib/vaidya/bin/vaidya.sh -jobconfig <path1> -joblog <path2>

我无法找到工作经历;我在哪里可以找到hadoop中的作业历史日志文件?

提前致谢!

1 个答案:

答案 0 :(得分:1)

当您的MR作业完成并输出到HDFS中的某个位置时,请检查该HDFS输出文件夹 - 您应该看到一个_logs文件夹,其中包含一个历史文件夹,该文件夹又包含您之后的两个文件(作业配置XML和作业历史记录日志)