标签: apache-spark yarn
在纱上运行Spark时,我了解到作业在安静时间可能会超出其资源配额,但在其他用户需要其配额时可能会被抢占。
这似乎很公平,但是我偶尔会看到AM配额被抢占了,这导致我的整个应用程序重新启动,并浪费了数小时的工作时间。
这似乎不公平!谁能解释AM容器抢占发生的条件以及如何防止这种情况?我宁愿我的应用闲置一会儿也不要重启。