标签: apache-spark pyspark nexus pypi spark-submit
我想知道是否有人使用过私有的PyPi回购协议和spark-submit --py-file https://..../my.egg?感觉应该有可能,但是我很难找到有关它的信息。
spark-submit --py-file https://..../my.egg
更新
我已经可以wget从我的私人存储库中提取鸡蛋了,但是由于某些原因,--py-files具有相同的网址不起作用。
wget
--py-files
使用--py-files获得401未经授权,即使我在URL中传递凭据时也是如此:https://user:pass@host/pypi/...
https://user:pass@host/pypi/...