中间输出压缩的性能

时间:2015-05-28 04:10:23

标签: performance hadoop mapreduce

我尝试将mapreduce性能与mapper的压缩中间输出进行比较。

myJobConf.setCompressMapOutput(true);

实验:

  • 1st:不压缩
  • 第二名:压缩

结果是#2nd实验中的映射器性能更快但减速器性能变慢。

对此有何解释?

0 个答案:

没有答案