AWS Glue:所需的最大执行者数<活动的执行者数

时间:2019-05-28 07:30:21

标签: apache-spark aws-glue

我正在查看我的AWS Glue作业指标,发现有些奇怪...

enter image description here

为什么需要活动执行者的数量>需要的最大执行者?他们为什么不被杀死?

在Glue中,有时会如图所示,活动执行者的数量发生变化,我是根据活动执行者的数量还是在工作设置中指定的费用来收费的?

1 个答案:

答案 0 :(得分:0)

  

所需的最大执行者人数是根据主动   正在运行和待处理的任务计数,因此它可能小于   活动执行者的数量。这是因为可以有执行者   在短时间内部分或完全空闲的状态   尚未退役。

参考:https://docs.aws.amazon.com/glue/latest/dg/monitor-debug-capacity.html

否,您需要根据分配的最大DPU数量和粘合作业执行时间来付费。