Cloudera YARN:在Cloudera中为纱线中的调度程序(队列)分配内存

时间:2018-09-25 10:10:29

标签: hdfs yarn cloudera hadoop2

我需要为某些作业创建优先级队列,以便可以无缝完成作业,而不必等待纱线中默认队列中的其他作业完成。

我在 Cloudera 中以公平的策略在根目录下创建了2个队列。

队列1-重量:1,%:50%

队列2-重量:1,%:50%

纱线总存储量为48GiB,芯数为28芯

所以我的问题是 1)如果纱线存储器在这两个队列之间分配,默认队列是否没有资源? 2)或者我应该为每个队列分配固定资源,例如:

队列1-虚拟核心(最小/最大):3/4内存(最小/最大):8GiB / 10GiB

队列2-虚拟核心(最小/最大):4/5内存(最小/最大):9GiB / 13GiB

默认队列会从yarn中获取剩余内存吗?

0 个答案:

没有答案