dask.delayed对象的分布和计算

时间:2018-06-30 10:30:59

标签: dask dask-distributed dask-delayed

dask.delayed对象是否可以通过dask在群集上分发?

而且,其任务图的执行是否也分布在集群上?

1 个答案:

答案 0 :(得分:2)

简短的答案是肯定的。

  

用户可以通过将本地Python会话连接到调度程序并提交工作来进行交互,方法是分别调用简单接口client.submit(function,* args,** kwargs)或使用大型数据集合和并行算法父级dask库。 dask库中的集合(例如dask.array和dask.dataframe)提供了对复杂算法和熟悉的API(如NumPy和Pandas)的轻松访问,而简单的client.submit接口则为用户提供了自定义控制,以使他们能够打破罐头的“大数据”抽象并提交完全自定义的工作负载。

延迟延迟对象包含在“父延迟库的并行算法”中。

有关更多信息,请参阅文档。 http://distributed.dask.org/en/latest/