我已根据EMR控制台上ssh -i ~/SparkTest.pem -ND 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com
的说明设置了我的SSH隧道。我也按照说明设置了FoxyProxy。
我可以访问http://master-public-dns-name:8088/
上的Hadoop ResourceManager,我可以看到我的应用程序正在运行。
单击任何应用程序或任何节点HTTP URL的主URL会导致加载页面出现问题,SSH隧道会提供以下输出channel 2: open failed: connect failed: Connection refused
。
我应该使用YARN ResourceManager吗?我在哪里可以找到这个的URL?在设置我的代理和SSH隧道时,是否存在我在某种程度上错过的配置步骤?
干杯。
答案 0 :(得分:0)
为了进行SSH并获取Spark UI。试试这个
ssh -i ~/SparkTest.pem -D 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com
这对我有用