为什么无法在Jupyter Notebook中运行pyspark,Mac OS

时间:2019-10-26 11:20:26

标签: macos apache-spark pyspark jupyter-notebook

我通过brew下载下载了apache pyspark,并尝试直接从https://spark.apache.org/下载。但是下载后,我尝试直接在终端中键入“ pyspark”并解决了该错误。 enter image description here

我也尝试了本手册中可用的所有步骤:https://medium.com/@GalarnykMichael/install-spark-on-mac-pyspark-453f395f240b。但是在jupyter笔记本中运行spark时,也会出现错误:

enter image description here

1 个答案:

答案 0 :(得分:1)

您的屏幕截图中的错误位于第14行,您尚未导入sparksession。不是使用pyspark函数进行Sparksession。

添加:      从pyspark.sql导入SparkSession 到您的代码,它可能会按照您的脚本提供给其他人,但将解决此问题。 请也分享您的脚本。