纱线上的火花-AM容器抢占与非AM容器抢占

时间:2018-10-23 08:01:26

标签: apache-spark yarn

在纱上运行Spark时,我了解到作业在安静时间可能会超出其资源配额,但在其他用户需要其配额时可能会被抢占。

这似乎很公平,但是我偶尔会看到AM配额被抢占了,这导致我的整个应用程序重新启动,并浪费了数小时的工作时间。

这似乎不公平!谁能解释AM容器抢占发生的条件以及如何防止这种情况?我宁愿我的应用闲置一会儿也不要重启。

0 个答案:

没有答案