我有一个map / reduce作业,它构建了一个减少的数组 执行数组连接。有时结果文件似乎 达到最大bson大小限制并且map reduce失败,“value too large to reduce”错误。
请告诉我们如何处理这种情况。我想要数组中的所有文档。我无法在数组中连接,因为如果有更多文档,它会因上述错误而失败..
由于 MRK
答案 0 :(得分:3)
您可以使用类似MongoDB Hadoop Adapter的东西在真实的map / reduce框架上运行map reduce作业。