如何防止Google Cloud Dataproc群集VM实例自动关闭？

Question

运行vm instance cluster +节点时，即使我在cluster / dataproc上使用并运行东西，vm实例也会在大约30分钟后自动关闭。我找不到此设置，不胜感激，例如：如何禁用此设置以防止它关闭，甚至如何以防止这种情况发生的方式配置新群集。

谢谢

Answer 1

默认的Dataproc群集没有任何类型的自动关闭功能。

如果您使用的是较旧的Datalab初始化操作，则可能会看到Datalab自己的非Dataproc感知关机功能，您可以禁用此处建议的一种方式：How to keep Google Dataproc master running?

否则，如果您使用某种模板或复制/粘贴参数来创建Dataproc集群，则可能是无意中设置了“计划删除”：https://cloud.google.com/dataproc/docs/concepts/configuring-clusters/scheduled-deletion

如果这些设置均不能解释您的情况，则应从“云日志”界面访问“活动日志”，选择Cloud Dataproc Cluster，然后打开activity_log类型的日志以查看谁删除集群的审核日志。或者，如果该集群仍存在于Dataproc中，但基础VM已关闭，请访问“ Compute Engine VM”日志类别，并查看“活动日志”以查看谁在停止您的VM。有时，在共享项目中，项目管理员可能正在运行某种脚本来自动关闭VM，以节省成本。