如何使用纱线配置24/7运行Spark流

时间:2019-02-05 13:52:33

标签: apache-spark streaming oozie

我有spark-streaming应用程序,当前我们使用oozie运行它。 我有一个问题,如果驱动程序崩溃,oozie将无法解决这种情况,并且直到手动事件我的应用程序才能运行。

我了解了oozie中的rerun选项,并想知道如何管理不需要调度的火花流应用程序-始终执行并能够在发生故障(内存\节点崩溃等)时自动重新运行。

0 个答案:

没有答案