群集重启后,Google Cloud Dataproc群集的外部IP会发生变化

时间:2017-09-22 11:51:25

标签: google-cloud-dataproc

google cloud dataproc有一个选项可以停止(不删除)群集(Master + Worker节点)并启动但是当我们这样做时,主节点和工作节点的外部IP地址正在改变,这会导致使用问题Hue和其他基于IP的Web UI就可以了。

重启后是否有任何选项可以保留相同的IP?

1 个答案:

答案 0 :(得分:1)

虽然Dataproc目前不提供使用静态IP地址的直接选项,但您可以使用基础计算引擎接口添加static IP address to your master node,可能会删除以前的“短暂IP地址”。

也就是说,如果您通过外部IP地址访问UI,这可能意味着您还必须管理防火墙规则以小心限制入站IP范围。根据您正在使用的UI,如果他们没有使用HTTPS / SSL,那么即使您有防火墙规则限制来自其他外部源的访问,这仍然不理想。

访问Dataproc用户界面的推荐方法是through SSH tunnels;如果您不想每次都重新键入所有SSH标记,您甚至可以将gcloud compute ssh和浏览器启动命令添加到shell脚本中以方便使用。这种方法还可以确保链接在YARN ResourceManager等页面中工作,因为这些链接将使用外部IP地址不适用的GCE内部主机名。