从Hadoop中的映射器发出矩阵

Question

我是Hadoop map reduce的新手，我想知道有一些outputformat类型可以让我直接从mapper发出一个矩阵（2d数组）（不转换为1d）。

我计划在我的Btech项目中加入这个。

Answer 1

看看：http://hadoop.apache.org/common/docs/current/api/org/apache/hadoop/io/TwoDArrayWritable.html 我猜这就是你需要的。

Answer 2

是的，你想只发射value作为可以使用的TwoDArrayWritable

的二维数组

如果您需要以矩阵形式发出key，则需要实施Custom Writable Class

希望你有个主意。