我有使用hadoop vaidya工具的程序。 http://hadoop.apache.org/mapreduce/docs/r0.21.0/vaidya.html
$HADOOP_HOME/contrib/vaidya/bin/vaidya.sh -jobconfig <path1> -joblog <path2>
我无法找到工作经历;我在哪里可以找到hadoop中的作业历史日志文件?
提前致谢!
答案 0 :(得分:1)
当您的MR作业完成并输出到HDFS中的某个位置时,请检查该HDFS输出文件夹 - 您应该看到一个_logs
文件夹,其中包含一个历史文件夹,该文件夹又包含您之后的两个文件(作业配置XML和作业历史记录日志)