Kafka用于实时数据处理多个消费者

时间:2017-06-14 23:47:02

标签: performance lucene stream apache-kafka message-queue

我有兴趣使用 Kafka 来传输必须由多个消费者(nosql,lucene)使用的数据(每秒100 K记录),并且想知道Kafka是否是我的好资源要求或任何有用的替代方案。消费者消费数据是:

消费者1 - 一旦涉及主题就会消耗数据 消费者2 - 从主题

批量消费数据

1 个答案:

答案 0 :(得分:1)

是的,Kafka非常适合您的要求。阅读Kafka Streams here

如果您想批量阅读数据,请使用Kafka Consumer