达斯克延迟缓存

时间:2019-01-31 18:38:42

标签: dask dask-delayed

关于将缓存集成到延迟图形中的最新技术是什么?我有大型图,这些图的路径可以从图的每次单独运行(即跨处理)中的持久缓存(即磁盘,并通过参数散列)中受益匪浅。

我的期望是有一个我可以在图形优化阶段集成的api,在适当的地方用从磁盘加载的常量替换节点。它看起来像cachey应该是我的切入点,但我一直没能得到它的纯DASK延迟实例的工作。

1 个答案:

答案 0 :(得分:-1)

是的,缓存可能可以解决这个问题。您可能要参考的文档页面在这里:http://docs.dask.org/en/latest/caching.html

如果存在特定错误,建议您打开错误报告。

相关问题