Hadoop MapReduce全局计数器

时间:2015-03-13 01:49:27

标签: hadoop mapreduce hadoop-streaming

我的申请中需要一个全局计数器。完成所有reduce任务后,我必须打印全局计数器。

我在Here找到了解决方案。但是,我想知道在使用C ++编写应用程序时是否可以使用带有Hadoop流或管道的全局计数器。

1 个答案:

答案 0 :(得分:0)

您可以使用流程的stderr输出。

我发现了这个Jira问题: https://issues.apache.org/jira/browse/HADOOP-1328

它有很少的补丁,我想你可以找到关于如何做全局计数器的那些。