EMR群集无法调整大小

Question

我有一个EMR集群，该集群是2020年4月创建的，具有1个主节点（按需），1个核心（点）和多个Task节点（点）。我一直在积极使用它，直到最近几天为止一切都进行得很好。由于某种原因，集群在尝试为核心节点查找竞价型实例时进入了“等待”模式。我将配置设置为“ 300分钟后，转移到按需实例）。我看到核心节点的状态为”调整大小”。

我不知道下一步该怎么做。我在AWS上获得基本支持。我真的不希望终止此群集并重建它，因为我花费了大量时间进行个人配置。为了防止将来发生这种情况，我能做些什么呢？

Answer 1

调整EMR群集的大小存在很多问题。不建议将所有竞价型实例都放在一个盒子中。我建议不要多做一些工作。

1. 停止调整大小。等待更改。读取错误消息。然后再次发出“调整大小”请求。

2. 如果您不使用HDFS（例如从S3执行所有操作），请杀死集群并获得一个新的集群。

如果您正在使用它，建议您通过https://aws.amazon.com/blogs/big-data/best-practices-for-resizing-and-automatic-scaling-in-amazon-emr/进行操作。

1. 创建仅需要点的群集时，请使用2或3框- 一种。 10％的按需价值-1个实例 b。 20％的按需价值-1个实例

如果预算允许，我建议您按需保留1个，然后尝试。