延迟功能是否使用相同的conda环境?

时间:2020-11-10 20:37:51

标签: python conda dask dask-distributed dask-delayed

我已经使用conda安装了dask。当我创建延迟函数并使用dask在我的PBS群集上运行它们时,如何确保工作节点在运行延迟函数之前激活相同的conda环境?

1 个答案:

答案 0 :(得分:0)

This document为您提供了有关导入和环境如何在敏捷群集中工作的良好常规信息。就PBS而言,您可能会陷入每个工作人员看到相同文件系统的情况。

要配置PBS启动,您应该阅读this,在这里您可以定义各种设置,包括工作人员将搜索的路径。 如果您还(而非)在节点上具有本地存储,那么您可能希望使用第一个链接中的一种方法来分发环境。