我在windows中配置了hadoop-2.7.2。当我提交MR工作时,它工作正常。但是如果我提交多个MR工作,那么一次只能运行一个工作。
第一个作业处于RUNNING状态,所有其他作业处于ACCEPTED状态,即使纱线有足够的内存(6 GB中有3 GB空闲)。
但是在hadoop-2.5.2中同样可行。
纱-site.xml中
<property>
<name>yarn.nodemanager.resource.memory-mb</name>
<value>6144</value>
</property>
<property>
<name>yarn.scheduler.minimum-allocation-mb</name>
<value>256</value>
</property>
<property>
<name>yarn.scheduler.maximum-allocation-mb</name>
<value>2250</value>
</property>
有人帮助我并行完成多项工作。