我有点困惑
应该是什么 yarn.nodemanager.resource.cpu-vcores 值? (根据图片向下......)
- 工作机器上真正的总CPU核心?
醇>
OR
- 将值设置为工作计算机上实际总CPU CORE的80%?
(正如一些网站推荐的那样)
醇>
现在我把它设置为8(在每台工作机上我们有8个CPU核心)
如何在datanode机器上捕获“真正的总CPU CORE ”的示例:
nproc --all
8
重要提示 - 当我将其设置为6时会导致重启spark thrift服务器,所以我没有选择并将其设置为max - 8,现在有8个值可以