当工作完成。我可以从WebUI跟踪作业历史记录日志,但无法从datanode(运行nodemanger服务)本地文件系统找到日志,也无法在hdfs://user/who/.staging下找到日志。我确认已配置$ {yarn.nodemanger.log-dirs}。
纱线日志是否自动删除?或者有些服务没有运行?
答案 0 :(得分:1)
不,您可以使用命令yarn logs -applicationId your_application_id
检索应用程序日志。
答案 1 :(得分:0)
日志存储在HDFS中。鉴于工作细节如下:
的http://:/ jobhistory /工作/ job_1440796954403_13743
申请ID:
application_1440796954403_13743
获取日志的命令:
纱线日志-applicationId application_1440796954403_13743