标签: apache-spark
需要在自动重启中运行spark Streaming作业,已经使用了http://mkuthan.github.io/blog/2016/09/30/spark-streaming-on-yarn/建议的参数 作业是由oozie使用Shell脚本调度的。 无论经过什么尝试,无论是什么原因,它都应该失败,但是不幸的是,它失败了,需要人工干预才能重新启动工作流程。 有一个选项可以使用sub = workflow重新启动,但找不到与我们的要求相关的示例。