Dataproc Cluster上可用的Spark UI?

时间:2017-05-29 18:28:28

标签: apache-spark pyspark google-cloud-dataproc

希望在Dataproc中的默认群集上与传统的Spark Web GUI进行交互。

1 个答案:

答案 0 :(得分:3)

这可以通过创建到Dataproc主节点的SSH隧道来完成。通过使用SOCKS代理,您可以访问YARN上运行的所有应用程序,包括Spark会话。

本指南将详细介绍您: Dataproc Cluster web interfaces