访问tez工作历史记录

时间:2016-10-18 06:33:53

标签: hive apache-pig hadoop2 tez bigdata

我想从tez执行引擎的作业历史服务器获取作业信息。

目前,所有地图缩减作业都会反映在作业历史记录服务器上,而不是tez文件服务器上。

作业历史记录使用某种日志来获取所有信息。我在哪里可以找到这些日志?如果作业历史记录服务器上没有该信息,我可以解析这些日志以获取我需要的信息。

我已经尝试过解析pig-tez cmd日志了。解析不包含足够的信息,并且不适用于tez上的配置单元。

0 个答案:

没有答案