我需要为某些作业创建优先级队列,以便可以无缝完成作业,而不必等待纱线中默认队列中的其他作业完成。
我在 Cloudera 中以公平的策略在根目录下创建了2个队列。
队列1-重量:1,%:50%
队列2-重量:1,%:50%
纱线总存储量为48GiB,芯数为28芯
所以我的问题是 1)如果纱线存储器在这两个队列之间分配,默认队列是否没有资源? 2)或者我应该为每个队列分配固定资源,例如:
队列1-虚拟核心(最小/最大):3/4内存(最小/最大):8GiB / 10GiB
队列2-虚拟核心(最小/最大):4/5内存(最小/最大):9GiB / 13GiB
默认队列会从yarn中获取剩余内存吗?