来自Kafka consumer_offset主题的大量消息

Question

我已经和Kafka玩了几个月了，我注意到我在Kafka内部的主题__consumer_offsets下有相当多的消息/秒。现在我们已经掌握了其他主题，这些主题在经纪人的消息数量方面相当小。对于几个主题，我们最多可以看到~1k消息/秒，但我几乎总是看到来自_consumer_offsets的15-20k消息/秒。有人可以指出我可以解释这一点，或者提供一些有关为什么consumer_offsets主题有这么多消息的见解。

谢谢

Answer 1

这就是Apache Kafka的工作方式。有关详细信息，请参阅http://kafka.apache.org/documentation.html#impl_offsettracking。