在Windows OS中的（Anaconda-Spyder）中运行pyspark

Question

亲爱的， 我正在使用Windows 10，并且熟悉在Spyder中测试我的python代码。 但是，当我尝试编写“导入pyspark”命令时，Spyder显示“没有名为“ pyspark”的模块” Pyspark已安装在我的PC中，并且我也可以在命令提示符下导入pyspark，而不会出现任何错误。 我找到了很多博客，解释了如何在Ubuntu中执行此操作，但找不到在Windows中解决该问题的方法。

Answer 1

要在Spyder中使用软件包，您必须通过Anaconda安装它们。你可以开 “ anaconda提示”，并写下自爆代码：

conda install pyshark

这将为您提供SPYDER中可用的软件包。

Answer 2

嗨，我几周前已经在Windows中安装了Pyspark。让我告诉你我是怎么做到的。 我遵循了“ https://changhsinlee.com/install-pyspark-windows-jupyter/”。

因此，在精确执行每个步骤之后，您可以使用命令提示符或保存python文件运行pyspark。

通过笔记本运行时（下载Anaconda）。启动anacoda shell并键入pyspark。现在您不需要执行“导入pyspark”。 在没有此程序的情况下运行程序，一切都会好的。您也可以执行spark-submit，但为此我发现您需要删除环境变量中的PYSPARK_DRIVER_PATH和OPTS PATH。