如何将数据从Mongodb流式传输到Hadoop

Question

我是Hadoop的新手，我开始计划一个应用程序来分析我在Mongodb上的三个集合上的数据，我尝试搜索类似Mongodb river for elasticsearch的内容，但我没有找到一种将数据流式传输到Hbase或HDFS的方法，我找到了Sqoop和Flume，但我不知道这是否与我正在寻找的相同 我看到的方式，就像http api -> something here -> Hadoop storage。有什么东西可以帮我吗？

Answer 1

尝试流式汇编，

流式汇编程序允许您使用Python，Ruby和JavaScript等语言编写MapReduce作业，而不是Java，这使熟悉MongoDB和流行的动态编程语言的开发人员可以轻松利用Hadoop的强大功能。

了解更多信息visit。