Java Hadoop,除了Reducer输出之外,如何将映射器输出保存到HDFS

时间:2018-03-20 04:27:28

标签: java hadoop mapreduce

我遇到的情况是我必须将mapper输出的结果后处理到我的MySQL数据库中以进一步可视化。所以我需要一个Hadoop(3.0)Map / Reduce作业输出mapper的内容和输出的reducer。我已经做了很多搜索,但除了先运行map / reduce作业,然后再运行另一个map map作业之外,我还没有看到这个问题的一个很好的解决方案。如果我不必两次运行这项工作来输出两个阶段的结果,那将会节省很多悲伤。有一个简单的" setSaveMapperResults(true)"功能我可以称之为“我没有看到???谢谢大家。

0 个答案:

没有答案