纱线:添加自定义log_file_type

时间:2018-11-29 10:01:05

标签: logging mapreduce yarn hadoop2

我们有一个要求,我们希望基于某些事件为MapReduce作业生成多个日志文件。 event1.log代表事件1,event2.log代表事件2等。在作业完成后,当我们检查application_id的汇总日志时,所有事件的日志都位于LogType:syslog下。由于syslog可能很大,因此查找特定事件将很麻烦。一种替代方法是使用一些日志分析器工具,但是如果有更简单的方法,我们不想花费时间来建立这种工具。

我只是想知道我们是否可以为不同事件添加自定义log_file_type。如果可能,我们可以使用命令

轻松获取与特定log_file_type关联的日志
yarn logs -applicationId <Application ID> -log_files <log_file_type>

如果没有,还有其他选择吗?

0 个答案:

没有答案