是否有可能从haddop中的同一个reducer写入HBase和多个文件

Question

我们需要能够将map / reduce的输出写入多个文件（已经工作）以及HBase表。这可能吗？我一直在看MultipleOutputs选项，但我无法弄清楚如何做到这一点，或者它是否可行。我对haddop非常新。 如果有人知道网上的任何例子，你能指出我正确的方向吗？ 谢谢。

Answer 1

我个人没有试过这个，但MultipleOutputs的API确实支持它。因为您为每个命名输出单独配置输出键/值类，所以您可以拥有一个（或多个）*FileOutputFormat和一个TableOutputFormat。