Spring XD是正确的工具选择吗？

Question

我们正在构建M2M物联网平台，部分生态系统是大数据存储和分析组件。

该平台在一端连接设备，并使用ActiveMQ提供流数据输出，以与大数据应用层连接。

我现在正在设计这个中间层，它接受机器数据，运行实时进程并将这些数据存储到Hadoop存储模块中。

从我看来，Spring XD似乎能够协调这个过程，从摄取，过滤，处理，分析和导出到Hadoop。

然而，我不知道有谁做过这样的事情。谁在这里执行过类似的事情？需要您对中间件工具选择的反馈。

Answer 1

Spring XD非常适合RabbitMQ，对于ActiveMQ，您可以使用JMS连接器。

有关更多信息，请查看Spring Integration，它是主要的基础，并且一直存在。

Spring XD在YARN或Zookeeper上运行，非常稳定。

我已经看到它用于在一些地方编排大数据。