标签: hadoop heap-memory yarn
我正在尝试执行一项工作,但我遇到了堆空间错误。 做了一些测试后,我意识到(也许)问题是自定义密钥大小。 (映射器输出键/减少输入键)
首先我测试: 1. Custom Key仅持有一个Long。这不会导致堆空间错误问题。 2. Custom Key持有3个Longs。这会导致堆空间问题。
我真的不明白堆大小和自定义密钥大小之间的真正关系。
他们之间有什么关系吗?
谢谢,