重复提交申请工作

Question

我们正在使用DataStax Spark 6.0。 我们正在使用crontab提交作业，每5分钟运行一次。我们编写脚本来查找脚本是否正在运行，以避免重复提交同一应用程序。有没有一种方法可以停止提交作业或将作业保留在Spark级别的Queue中，以避免同一应用程序重复作业。

谢谢 拉克什

我尝试仅使用Crontab

Answer 1

您可以使用oozie摆脱您的火花工作。