从Map / Reduce任务查看日志

Question

我知道我可以在里面找到map / reduce任务日志：/ usr / local / hadoop / logs / userlogs /.

有友好的方式来看吗？

例如，当我点击http://127.0.0.1:8088/cluster/时，我可以看到群集中执行的所有作业。然后我点击了完成的工作。但是现在，当我尝试点击Tracking URL: History时它会给我一个错误，为什么我可以从这里看到任务日志？

我想从每个任务中看到stderr，stdout和syslog。

Answer 1

尝试使用HUE中的Job Browser

或使用命令

纱线日志-applicationId [OPTIONS]

一般选项是：  -appOwner AppOwner（假设是当前用户，如果                                  未标明）  -containerId ContainerId（必须指定节点                                  指定地址）  -nodeAddress NodeAddress，格式为nodename：port                                  （如果容器ID是，则必须指定                                  指定）

示例：yarn logs -applicationId application_1414530900704_0007