监视dd.DataFrame.apply的进度

时间:2018-05-14 01:24:39

标签: dataframe parallel-processing progress-bar monitoring dask

如何监控行式Dask DataFrame应用操作的进度?

ProgressBar()包裹这一行似乎没有做任何事情,即控制台上没有打印任何内容?

from dask.diagnostics import ProgressBar
with ProgressBar():
    df_calc = ddf.apply(myfunc, axis=1)

1 个答案:

答案 0 :(得分:0)

默认情况下,Dask操作是惰性的。只有在您致电Permissivecompute时才会进行计算。

persist