失败的Azkaban Spark Job取得了失败的成功最终状态

时间:2017-12-01 19:17:43

标签: hadoop apache-spark azkaban

用例:

  1. Azkaban开始Spark工作
  2. Sparks Job失败了一些
  3. 预期结果:

    Hadoop ResourceManager表示作业最终状态为FAILED

    实际结果:

    Hadoop RM表示工作最终状态为SUCCESSFUL

    有人知道如何修复它?

1 个答案:

答案 0 :(得分:0)

Spark以默认(客户端)模式运行。

当解决方案模式更改为群集时。