如何将数组输入Map Reduce作业？

Question

我有一个不断检索某些数据的服务。我将这些数据转储到一个数组中，这个数据必须进一步处理。是否有可能创建一个不断更新的动态数组，并排，我可以执行Map Reduce Job？ 另外我用什么类来简单地采用数组输入（而不是文件）？ PS我是Hadoop / Map Reduce的新手 我是用Java编写的。

Answer 1

Hadoop用于批量处理，因此只有当您存储了像文件这样的数据并且需要处理它并完成作业时它才是强大的。您可以查看Storm。我认为它会更好地适合您的使用案例。