设置YARN应用程序ID Spark应用程序

时间:2015-12-22 14:40:37

标签: apache-spark yarn

我找到了从SparkContext获取applicationId的方法,

sc.applicationId

但是我可以设置这个吗?应用程序需要使用yarn-cluster提交。所以我需要在需要时使用applicationId停止它。

此应用程序是否与YARN中的applicationId相同?

1 个答案:

答案 0 :(得分:1)

是的,当以纱线群集模式提交应用程序时,SparkContext应用程序ID将引用相同的YARN应用程序ID。

sc.applicationId

See the Spark Scala API docs.