如何在Hadoop中的某些工作中描述一份工作

时间:2014-08-22 21:25:14

标签: hadoop mapreduce hprof

我的程序中有4个mapReduce作业,但我想简要介绍job3(job3中的Mapper和reducers)。我将mapred.task.profile设置为true,但它会导致对所有作业进行分析,这非常耗时。如何强制它在job3中只分析Mapper和Reducers?

1 个答案:

答案 0 :(得分:1)

使用Jumbune,www.jumbune.org,您可以通过Jumbune运行这项工作,它会为您提供每阶段统计数据,您也可以查看历史工作。