将纱线日志定位在群集上

Question

我用

yarn logs -applicationId "id"

在命令行上显示日志，但是我需要在集群上找到文件..我想知道日志在集群中的保存位置？

Answer 1

yarn log命令从地图缩减作业完成后聚合的HDFS中提取日志（假设启用了日志聚合）。它们存储的位置由以下控制：

yarn.nodemanager.remote-app-log-dir

在HDFS的目录中，您应找到该用户的子目录，然后找到另一个子目录中的日志。