我试图设置hadoop cluster
。目前,我已经设置了一个主节点并使用Python提交了map reduce作业。
作业已提交,我可以在控制台中看到结果。
现在,我一直在尝试查看作业跟踪器web ui以查看作业属性但不确定应该使用哪个端口?
ipaddress : 50070
- 显示所有namenode和datanode
ipaddress : 8088
- 向我显示群集信息
我应该使用哪个端口来查看作业跟踪器?我试过port 50030
但没有显示任何内容。
使用hadoop版本2.7.3
答案 0 :(得分:0)
我没有看到mapreduce.framework.name的任何值设置,应该设置正确的值,以便它可以显示在YARN上?
你没有看到它,所以它是默认的
财产
mapreduce.framework.name
默认值:local
描述:用于执行MapReduce作业的运行时框架。可以是local
,classic
或yarn
之一。
您需要将mapred-site.xml
更新为该属性设置为yarn