如何在Yarn Hadoop中获取已完成作业的调度程序?

时间:2018-04-18 00:15:30

标签: hadoop mapreduce yarn scheduler cloudera

所以我处于这种情况,我正在修改mapred-site.xml和Hadoop的不同调度程序的特定配置文件,我只想确保我对默认调度程序所做的修改( FIFO),实际上已经发生了。

如何使用作业ID检查应用于作业或已提交给hadoop的作业队列的调度程序?

很抱歉,如果这没有多大意义,但我已经非常广泛地环顾四周,并阅读了很多文档,但我仍然无法找到这条基本信息。

我只是将单词count作为一项工作,更改mapped-site.xml和yarn-site.xml中的调度程序设置。 例如,我正在根据以下链接将“yarn.resourcemanager.scheduler.class”属性更改为“org.apache.hadoop.yarn.server.resourcemanager.scheduler.capacity.CapacityScheduler”:see this

我还将特定于调度程序的相应jar文件移动到正确的目录。

供您参考,我使用的是“纱线”运行时模式,Cloudera和Hadoop 2。

非常感谢你的帮助

0 个答案:

没有答案