OOZIE处于RUNING状态

Question

我使用OOZIE运行工作流程。但是一个简单的官方示例shell-wf（回声hello oozie）停留在RUNNING状态，并且永无休止。可以提交工作流，但是停留在RUNNING状态。 OOZIE UI中的作业日志中没有任何错误。

提交内部带有spark-submit的shell时，将永远不会提交作业，并且在Spark UI中无法看到该作业。我怀疑外壳根本没有运行。

可能有什么问题？

Answer 1

快速清单

对于那些有相同问题的人，有一个检查表来检查您的系统。希望对您有帮助！

1. 在您的Oozie配置中检查jobTracker。 注意：如果作业已成功运行，则可能不是jobTracker的问题。相关讨论可以找到here
2. 检查磁盘使用情况。如果##标题##磁盘使用率大于90％，请删除一些文件以确保磁盘使用率小于90％。 （这是我的情况！）
3. 检查Console URL卡住的动作。可以在Job - Job Info tab - Actions - Action - Action Info tab中找到。此处的工作状态可以帮助您发现问题。
4. 检查Oozie日志。通常在/usr/local/oozie/logs中。检查oozie.log*以查找是否有例外。

详细信息

磁盘使用情况

如果您的操作状态为

  

YarnApplicationState：已接受：等待AM容器被分配，启动并向RM注册。

这可能是磁盘问题。相关讨论可以在MapReduce job hangs, waiting for AM container to be allocated中找到。解决方案可以在Why does Hadoop report "Unhealthy Node local-dirs and log-dirs are bad"?中找到。