执行distcp时的映射器数量

时间:2016-02-10 18:24:11

标签: hadoop mapreduce hdfs distcp

如何设置要执行distcp作业的映射器数量?我知道我们可以通过Hadoop distcp -m来设置映射器的最大数量。但是可以设置数字而不是最大映射器数量吗?

由于

1 个答案:

答案 0 :(得分:2)

,到目前为止,无法为distcp设置确切的映射器数量。

正如您所说,我们只能使用-m指定最大同时复制数。 Hadoop hdfs处理同步复印机以最佳方式完成复印作业。所以它可能是不让我们指定确切数字的原因。

distcp - hadoop 2.7.2