无法配置本地群集dask工作目录

Question

我正在尝试在config.yaml文件（版本Dask 0.16.0）中配置dask worker space。
我尝试添加

local_dir: /path/to/ssd

或

local-directory: /path/to/ssd

或

local_directory: /path/to/ssd

但是我仍然在运行py文件的同一目录中找到dask-worker-space。

我是否遗漏了dask_worker.py的内容？

Answer 1

您可以在启动dask workers时设置local_directory

cluster = LocalCluster(..., local_dir="/path/to/mydir")

或

dask-worker ... --local-directory /path/to/mydir

Answer 2

在配置文件中看起来像the option does not exist。

Answer 3

我使用的是分布式版本 2021.02.0，我可以这样设置工作目录

cluster = LocalCluster(name="New Cluster", local_directory="/tmp")