卡夫卡的同一主题的消费者数量是否有限制？

Question

Kafka是否对同时连接有限制（使用 Consumer.createJavaConsumerConnector）对同一主题内的相同内容 组？

我的场景是我需要从不同的过程中消耗一个主题（不是 线程），所以 我需要创建大量高级别消费者。

Answer 1

同一个消费者群体中的活跃消费者数量受主题分区数量的限制。额外的消费者将充当备份，并且只有当其中一个活跃消费者关闭并且该组重新平衡时才会开始消费。

如果您需要在多个流程中使用相同的数据副本，则您的消费者应该位于不同的消费者群组中。您可以拥有的消费者群体数量没有限制。

Answer 2

主要限制是具有此主题的分区数 - 您可以创建比分区更多的使用者，但它们不会消耗任何内容。