无法连接到EMR上的Spark UI

时间:2015-08-26 12:10:14

标签: hadoop ssh amazon-ec2 apache-spark amazon-emr

我已根据EMR控制台上ssh -i ~/SparkTest.pem -ND 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com的说明设置了我的SSH隧道。我也按照说明设置了FoxyProxy。

我可以访问http://master-public-dns-name:8088/上的Hadoop ResourceManager,我可以看到我的应用程序正在运行。

单击任何应用程序或任何节点HTTP URL的主URL会导致加载页面出现问题,SSH隧道会提供以下输出channel 2: open failed: connect failed: Connection refused

我应该使用YARN ResourceManager吗?我在哪里可以找到这个的URL?在设置我的代理和SSH隧道时,是否存在我在某种程度上错过的配置步骤?

干杯。

1 个答案:

答案 0 :(得分:0)

为了进行SSH并获取Spark UI。试试这个

ssh -i ~/SparkTest.pem -D 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com

这对我有用