是否可以通过EMR（通过VPC）查看Spark UI？

Question

我已经完成了https://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-ssh-tunnel-local.html中描述的过程，通过本地端口转发打开ssh隧道，然后转到http://localhost:8157/。

这将打开Hadoop / YARN界面，此时我点击Tracking UI / ApplicationMaster链接，并收到“找不到此站点的服务器DNS”页面。

根据应该将我带到Spark UI的AWS文档http://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/emr-spark-history.html。

我还缺少另一个能够看到Spark UI的步骤吗？

Answer 1

最好的体验来自于通过SSH使用SOCKS代理，因此它可以动态支持URL和端口。看看https://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-ssh-tunnel.html。