从驱动程序运行多个Spark提交实例

时间:2018-09-21 12:25:21

标签: apache-spark pyspark spark-submit

我有Spark在群集上作为独立应用程序运行。我从驱动程序节点(不同计算机)使用“ spark-submit”命令提交作业。一次只运行一个“火花提交”作业。如果我执行另一个,它将等待上一个完成。我已经按照驱动程序上的要求打开了端口。如何一次运行多个“ spark-submit”命令实例?

0 个答案:

没有答案