如何在mappers中完成从hdfs读取的时间?

时间:2015-12-13 21:12:01

标签: hadoop mapreduce hadoop2

我需要找时间所有映射器都从hdfs接收输入。这意味着,让我们在hdfs上存储1gb数据,并且我有两个映射器。每次mappernisnfed让100mb(分割大小)。我想找到一种方法来找到最后一个映射器接收其最后一个块的时间。

我正在考虑使用清理方法,但它可能不会产生确切的时间,因为在mapper中的处理完成后执行cleanp功能。

0 个答案:

没有答案