如何从运行PySpark内核的EMR jupyter笔记本中的另一个ipynb文件导入？

Question

我在AWS EMR上使用jupyter笔记本来运行PySpark，但无法从另一个文件导入模块。我尝试了几种我在stackoverflow上搜索过的方法，但没有一个起作用。更具体地说，我尝试了以下操作（在这里，与运行import语句的笔记本位于同一目录中，有一个名为“ include.ipynb”的笔记本）：

这两种方法都可以在本地计算机上的jupyter笔记本中使用。他们为什么不在AWS上工作？

Answer 1

您必须使用Pip或conda在EMR中明确安装这些软件包。您当地的计算机已经安装了那些软件包。