我已经使用anaconda成功安装了pyspark,并在.bashrc
文件中配置了路径。
键入pyspark
命令后,它将打开Jupyter-notebook
代码在其中正常工作的python
。像print "Hello"
等
但是当我执行collect()
,take(5)
等Pyspark命令时,会出现错误"Cannot run program '/usr/bin/Python-3.7.4". Permission denied.
这是错误的目录,因为Python-3.7.4
目录中安装了Anaconda
。
是否需要执行任何配置/步骤来解决此问题?
答案 0 :(得分:0)
尝试将PYSPARK_PYTHON
和PYSPARK_DRIVER_PYTHON
环境变量更新为正确的Python 3分发路径