我在运行某些步骤时遇到此错误:
Container [pid=5784,containerID=container_1482150314878_0019_01_000015] is running beyond physical memory limits. Current usage: 5.6 GB of 5.5 GB physical memory used; 10.2 GB of 27.5 GB virtual memory used. Killing container.
我在网上搜索,人们说要增加内存限制。这个错误发生在我已经使用c4.xlarge增加到实例I允许的最大值之后。我可以获得一些关于此错误的帮助以及如何解决此问题吗?
另外,我不明白为什么mapreduce会抛出这个错误并且不会只是交换甚至工作得更慢而只是继续工作......
注意:在我更改为自定义输出压缩后,此错误开始发生,因此它应与此相关。
谢谢!