如果我有很多长时间运行的任务,如何管理dask-worker。

时间:2018-01-25 15:56:12

标签: dask dask-distributed dask-delayed

假设我有4个节点dask集群,其中在node-1,dask-scheduler正在运行,而在其余节点上,dask-workers正在运行。我正在集体提交5个长期运行的任务。所以在这种情况下发生的是,3个任务处于运行模式,其他2个处于等待状态。但是我不想等待dask-worker自由,而是因为任务长期运行而我想要开始新工作。

有没有办法在dask中实现这个目的。?

1 个答案:

答案 0 :(得分:1)

请参阅文档

中的secede