以何种方式减少在Dataflow中启动和停止工作池所花费的时间

时间:2017-11-27 10:36:16

标签: google-cloud-platform google-cloud-dataflow apache-beam

作为我在Dataflow上加载作业的性能分析的一部分,我注意到启动工作池通常需要大约2分钟,并且在成功加载后,还需要另外2分钟来停止工作池。 因此,如果我的整个过程需要10分钟才能完成,那么在这10分钟之内,大约需要5分钟来启动和停止工作池。

有没有什么方法可以减少这个配置时间,这在我的加载过程中起到了开销的作用?请建议。

0 个答案:

没有答案