获取hadoop Reducer中的总输入路径

Question

我仍然无法弄清楚如何获取hadoop中的输入路径总数。我看过Get Total Input Path Count in Hadoop Mapper，但不明白。我只是想知道，输入路径中有多少文件...请帮忙吗？

Answer 1

就像我在引用问题的答案结尾处所说，如果您使用的是hadoop的v0.20.203 +，那么您可以查询配置属性mapreduce.input.num.files

long inputFiles = context.getConfiguration().getLong('mapreduce.input.num.files');