标签: apache-spark
对于我的所有应用程序,spark会在<myPath>/.sparkStaging HDFS下创建其工作目录。是否有可能告诉spark在每个应用程序的不同位置创建此临时目录?
<myPath>/.sparkStaging
HDFS
我探索了Configurations,我找到的最接近的相关是spark.local.dir,但我不认为这会解决目的。有什么建议吗?
spark.local.dir