火花工人的PYTHONPATH

时间:2018-02-26 16:10:22

标签: pyspark

https://issues.apache.org/jira/browse/SPARK-832

这个问题真的解决了吗?你怎么能在火花2.2中的火花工人中加入PYTHONPATH?寻找一些不涉及某些全局变化的东西(即,不允许您使用.profile,.bashrc或者对集群中的每个节点进行更改)。

SPARK_HOME是火花生命的地方。文档似乎表明这是也是,其中拾取了conf / *。这是对的吗?

更新:我认为答案就在这里:Pyspark append executor environment variable

这与PYTHONPATH的搜索结果确实没有很好的联系。我试图在各地分散面包屑来帮忙。

0 个答案:

没有答案