Hadoop YARN:如何管理I / O

时间:2018-10-23 07:49:20

标签: hadoop io yarn

据我所知,Hadoop YARN仅能管理CPU和内存(以及使用FPGA / GPU等Hadoop 3.0设备。但是,我想管理I / O。

我是否缺少选项? 在YARN上管理I / O有哪些可能性?

1 个答案:

答案 0 :(得分:0)

Hadoop不明确支持I / O管理。您可以获得的最接近的东西可能是MapReduce计数器,您可以在其中跟踪读取的字节和写入的字节。如果要管理它,则可能必须使用某些治理中间件从外部进行跟踪。