使用dask多进程no-nanny对性能产生影响

Question

我注意到使用只有进程的dask worker和使用no-nanny而不是保姆的性能降低了5/6。这是预期的行为吗？

由于工人的状态，我想在没有保姆的情况下运行dask。我很欣赏在工人中拥有国家是不可取的，但它超出了我的控制范围（第三方图书馆）。

如果我使用保姆运行dask worker，我可以捕获工作者故障/重新启动并重新初始化工作人员吗？

Answer 1

Nanny进程只是启动一个dask-worker进程，然后监视它，如果它崩溃则重新启动它。它根本不应该影响性能。如果您没有保姆，则无法捕获工作人员故障或重新启动。这是保姆的角色。