Hadoop创建容器来处理每个task.container的属性是不同的。 我想知道Hadoop中每个任务的容器属性。例如Ram,cpu,....
是否有人知道它的工具?
感谢
答案 0 :(得分:0)
Bash是你的朋友:
CPU_MILLISECONDS用于cpu使用
hadoop job -counter <job-id> org.apache.hadoop.mapreduce.TaskCounter CPU_MILLISECONDS
PHYSICAL_MEMORY_BYTES用于内存使用
hadoop job -counter <job-id> org.apache.hadoop.mapreduce.TaskCounter PHYSICAL_MEMORY_BYTES