如何计算MapReduce作业输出目录中的最后一个部件号

时间:2012-05-09 23:36:17

标签: mapreduce hdfs

我想知道是否有办法找出MapReduce输出目录中的最后一个部件号?我想将另一个目录中的一些文件移动到该目录,但我想让它们看起来好像是同一输出的一部分。

1 个答案:

答案 0 :(得分:1)

对于仅限地图的作业,它是输入拆分的数量。减少工作量减少的数量。请注意,对于文件的输出编号(0到n-1)

,两个值都是零