优化Apache Beam /云数据流启动

Question

我使用自动缩放工作人员和1个工作人员对apache-beam进行了一些测试，每次看到启动时间约为2分钟。是否可以减少时间，如果可以，那么建议的减少启动时间的最佳做法是什么？

Answer 1

恕我直言：对于Cloud Dataflow这样的产品，两分钟非常快。请记住，Google正在为您启动功能强大的可自动扩展的大数据服务。

将该时间与其他云供应商进行比较。我已经看到一些集群（Hadoop）上线需要15分钟。无论如何，您都无法控制Dataflow的初始化过程，因此没有任何改善的地方。