Spark提交的应用程序未在YARN web ui中显示

时间:2017-11-06 09:37:00

标签: apache-spark pyspark yarn spark-submit

我有节点,我在纱线模式下安装了火花。当我使用

运行应用程序时
sudo ./usr/bin/spark-submit --master yarn --deploy-mode client MySparkCode.py

它运行良好。

当我在http://localhost:18089/处连接火花历史记录服务器时,我可以看到我提交的申请。

但是当我在http://localhost:8088/cluster/apps进入Yarn追索经理web ui时,我的应用程序根本没有显示。我做错什么了吗?不应该在那里展示我的申请吗?

1 个答案:

答案 0 :(得分:1)

$0

尝试模式群集