收缩Dataproc worker引导盘

时间:2018-09-28 08:25:05

标签: google-compute-engine google-cloud-dataproc

由于在计划期间进行了一些混淆,我们最终获得了几个运行23TB驱动器的工作节点,这些节点现在几乎完全未使用(我们将数据保存在外部存储中)。由于驱动器目前仅在浪费金钱,因此我们需要将它们缩小到合理的大小。 使用aresync,我能够将驱动器完全克隆到一个较小的驱动器上,但是显然您无法在GCE中交换启动驱动器(这对我来说没有意义)。有没有办法实现这些目标,或者我需要使用这些图像创建新的工作人员吗?如果是这样,我是否需要将其他配置复制到新实例以使其自动加入集群?

2 个答案:

答案 0 :(得分:0)

Dataproc在运行的群集中不支持VM配置更改。

我建议您删除旧群集,并创建具有所需磁盘大小的新群集。

答案 1 :(得分:-1)

我最终创建了一个受GCP支持的票证-https://issuetracker.google.com/issues/120865687-以获取该问题的正式答案。知道目前尚不可能,但是应该很快(在几个月内)可以在beta GCP CLI中使用,也可以稍后在控制台中使用。 进行了完整的集群重建。