DataProc Presto会自动接收新节点吗?

时间:2019-05-09 21:06:13

标签: google-cloud-platform autoscaling presto google-cloud-dataproc

我有一个包含10个节点和Presto的DataProc集群。群集的自动扩展功能已启用。我想知道Presto何时运行并且集群可以扩展,Presto能够自动接管并使用其他节点吗?我没有从Google文档中找到答案。

我担心的是,我需要手动重新启动Presto,这违反了自动缩放的目的。我的希望是,当presto获得更大的工作时,集群和自动伸缩就可以了。

1 个答案:

答案 0 :(得分:4)

Presto将在群集扩展时自动选择新节点。

但是,请注意,Dataproc自动缩放目前仅支持基于YARN度量的缩放(请参见docs)。您的集群不会基于Presto查询负载自动扩展,而是基于YARN的负载。