初始化脚本在databricks笔记本中工作正常,但在连接到群集时失败

时间:2020-07-29 12:16:25

标签: python bash cluster-computing databricks azure-databricks

我想将初始化脚本(具有所有库依赖项)附加到数据块中的交互式群集。初始化脚本看起来像下面的附件,并在databricks笔记本中正常工作。 enter image description here

我希望此Shell脚本在群集启动时运行,但是当我将其配置为群集的初始化脚本时,它将返回错误。这是我将初始化脚本附加到集群的方法, enter image description here

错误看起来像这样, enter image description here

我发现url讨论了相同的问题,但是这里提供的解决方案(将文件扩展名从.sh更改为.bash)对我不起作用。请帮助我解决此问题。

1 个答案:

答案 0 :(得分:1)

请不要删除多余的(")才能成功安装初始化脚本。

根据我的复制人:我使用的代码与上面相同。

enter image description here

结果:群集已终止原因:初始化脚本失败

enter image description here

除去多余的引号(")。

enter image description here

结果:成功安装了Init_Scripts。

enter image description here