在我公司,我们在生产中运行Kafka版本0.10.1.1。我注意到在过时的消费者周围有一种奇怪的行为,并需要一些帮助。因此,有一些不再使用的消费者组ID,但kafka似乎认为该组正在重新平衡。
https://www.techiediaries.com/sqlite-create-table-foreign-key-relationships/
我看到了类似上面的消息。由于我所使用的kafka版本将消费者组存储在_consumer_offsets中(而不是ZK中),因此我无法删除这些过时的消费者组。
1)这是我应该担心的事情吗?我们的系统中可能有短暂的消费群体,并且可能有过时的消费群体。我担心这可能导致_consumer_offsets以某种方式爆炸?我在网上https://github.com/apache/kafka/pull/1622上看到了一些有关错误的报告,所以我不确定这是./kafka-consumer-groups.sh的问题还是仅仅是问题。
2)有什么方法可以清理这些消费者群体?