在本地运行时自动设置Spark主URL

时间:2019-07-01 11:20:43

标签: apache-spark

我有一个Spark应用程序,可以在本地模式或真实集群上运行。当前,我们传递一个CLI参数--local,因此,如果已设置,我们将初始化主URL:

sparkBuilder = sparkBuilder.master("local[*]")

是否有可能弄清楚我们正在以独立模式运行,以便我们可以自动决定何时需要初始化本地主机?

0 个答案:

没有答案