标签: apache-spark yarn
我找到了从SparkContext获取applicationId的方法,
sc.applicationId
但是我可以设置这个吗?应用程序需要使用yarn-cluster提交。所以我需要在需要时使用applicationId停止它。
此应用程序是否与YARN中的applicationId相同?
答案 0 :(得分:1)
是的,当以纱线群集模式提交应用程序时,SparkContext应用程序ID将引用相同的YARN应用程序ID。
See the Spark Scala API docs.