我使用数据流服务来运行我的工作来从GCS读取数据并写入BQ表,成功运行作业,我想知道如何或在哪里可以找到Google为我的工作设置了多少个VM ?
谢谢。答案 0 :(得分:5)
使用[Blocking]DataflowPipelineRunner
运行Cloud Dataflow管道时,默认的工作虚拟机数量为3。
可以使用--numWorkers
参数在命令行上覆盖此值。
所有虚拟机(包括由Cloud Dataflow创建的虚拟机)都显示在Google Developers Console的“计算,计算引擎,VM实例”部分中。