我是Scala的新手。我以前一直在与PySpark合作。
我尝试使用下面的代码启动spark shell,但出现以下错误。
这是由我在PySpark上设置的内容引起的,还是我需要为Scala设置的内容?
代码:
user@master1:~$ spark-shell
错误:
Traceback (most recent call last):
File "/usr/local/bin/find_spark_home.py", line 74, in <module>
print(_find_spark_home())
File "/usr/local/bin/find_spark_home.py", line 56, in _find_spark_home
module_home = os.path.dirname(find_spec("pyspark").origin)
AttributeError: 'NoneType' object has no attribute 'origin'
/usr/local/bin/spark-shell: line 57: /bin/spark-submit: No such file or directory