运行火花作业未在UI中显示

Question

我提交了bin/spark-submit --class DataSet BasicSparkJob-assembly-1.0.jar中提到的我的火花工作，但未提及--master参数或spark.master参数。而不是那个工作被提交到我的3节点火花集群。但我想知道它提交作业的位置，因为它没有在Running Applications

中显示任何信息

Answer 1

如果您未在--master或spark.master中设置主服务器，Spark将在本地运行。

您仍然可以查看工作进度。默认情况下，在http://localhost:4040上运行您的火花作业期间，UI将可用。

当您的工作完成后，除非您配置了Spark历史记录服务器，否则此UI将被终止，您无法查看应用程序的历史记录

Answer 2

Spark可能会在您的开发计算机上以本地模式运行。