我有一个包含10个节点和Presto的DataProc集群。群集的自动扩展功能已启用。我想知道Presto何时运行并且集群可以扩展,Presto能够自动接管并使用其他节点吗?我没有从Google文档中找到答案。
我担心的是,我需要手动重新启动Presto,这违反了自动缩放的目的。我的希望是,当presto获得更大的工作时,集群和自动伸缩就可以了。
答案 0 :(得分:4)
Presto将在群集扩展时自动选择新节点。
但是,请注意,Dataproc自动缩放目前仅支持基于YARN度量的缩放(请参见docs)。您的集群不会基于Presto查询负载自动扩展,而是基于YARN的负载。