所以我处于这种情况,我正在修改mapred-site.xml和Hadoop的不同调度程序的特定配置文件,我只想确保我对默认调度程序所做的修改( FIFO),实际上已经发生了。
如何使用作业ID检查应用于作业或已提交给hadoop的作业队列的调度程序?
很抱歉,如果这没有多大意义,但我已经非常广泛地环顾四周,并阅读了很多文档,但我仍然无法找到这条基本信息。
我只是将单词count作为一项工作,更改mapped-site.xml和yarn-site.xml中的调度程序设置。 例如,我正在根据以下链接将“yarn.resourcemanager.scheduler.class”属性更改为“org.apache.hadoop.yarn.server.resourcemanager.scheduler.capacity.CapacityScheduler”:see this
我还将特定于调度程序的相应jar文件移动到正确的目录。
供您参考,我使用的是“纱线”运行时模式,Cloudera和Hadoop 2。
非常感谢你的帮助