卡住安装PySpark

时间:2020-10-02 14:02:10

标签: python apache-spark pyspark jupyter

我一直遵循并尝试在MacBook上安装PySpark,但是当我完成安装时,出现了以下错误消息:

Traceback (most recent call last):
  File "/Users/vasquezk26/opt/anaconda3/bin/jupyter", line 11, in <module>
    sys.exit(main())
  File "/Users/vasquezk26/opt/anaconda3/lib/python3.8/site-packages/jupyter_core/command.py", line 247, in main
    command = _jupyter_abspath(subcommand)
  File "/Users/vasquezk26/opt/anaconda3/lib/python3.8/site-packages/jupyter_core/command.py", line 133, in _jupyter_abspath
    raise Exception(

我安装了PySpark,findspark和anaconda3。

有人可以帮我吗?

1 个答案:

答案 0 :(得分:0)

this answer中的报道PySpark不支持Python 3.8(除非您使用的Spark 3.0似乎可以解决此问题)。

我不确定您收到的错误消息是否是因为这个原因,但是我在将Python 3.8作为默认设置的Ubuntu 20.04上安装它时也遇到了问题。

我的建议与该答案中的建议相同:尝试使用Python的早期版本(应该使用3.6),或者在这一点上,尝试使用看起来与Python 3.8兼容的Spark 3.0。

>