无法在浏览器中启动PySpark（Windows 10）

Question

我正在尝试通过从控制台输入pyspark在我的浏览器中启动PySpark笔记本，但是我收到以下错误：

c:\Spark\bin>pyspark
python: can't open file 'notebook': [Errno 2] No such file or directory

我在这里做错了什么？

请帮帮忙？

Answer 1

听起来好像你的路径中没有安装jupyter笔记本。

我更喜欢使用Anaconda进行python发布，Jupyter是标准配置，并且还会安装所有必要的路径信息。

在此之后，只要您正确设置了PYSPARK_PYTHON_DRIVER=jupyter和PYSPARK_PYTHON_DRIVER_OPTS='notebook'，就可以了。

Answer 2

您要在调用命令pyspark时启动jupyter笔记本。因此，您需要将以下内容添加到bash_profile或zshrc_profile中。

export PYSPARK_SUBMIT_ARGS="pyspark-shell"

export PYSPARK_DRIVER_PYTHON=ipython

export PYSPARK_DRIVER_PYTHON_OPTS="notebook" pyspark