我想从Eclipse(安装在我的MackBook上)在databricks集群上运行python代码(3.5)。
我已经在MacBook上安装了databricks-connect
https://pypi.org/project/databricks-connect/
并通过
进行配置 https://docs.databricks.com/dev-tools/db-connect.html#eclipse
我还从Eclipse运行了一个测试,它运行良好,可以在databricks笔记本sparkUi上看到工作。
但是,当我需要导入一些外部库时,Eclipse抱怨
ImportError: No module named 'mmlspark'
对于
from mmlspark import LightGBMRegressor
我已经在databricks群集上安装了lib(mmlspark),并且相同的python代码可以在databricks笔记本上很好地运行。
如何从Eclipse运行它?
谢谢