如何在gce上设置令人尴尬的并行作业

Question

在GCE上设置令人尴尬的并行作业的最简单方法是什么？我在其他集群上使用了slurm但是想避免配置和安装问题。谷歌有没有开箱即用的东西？

Answer 1

最简单的选择可能不是直接使用GCE！ Google Cloud还有一些其他产品可以自动管理并行资源的配置/安装：

• Dataflow，基于Apache Beam
• Dataproc，基于Hadoop
• BigQuery，如果您的查询可以用类似SQL的形式表示。