复制器筛选器已使用的邮件

时间:2019-05-03 05:15:01

标签: confluent-kafka

为什么融合的复制器会复制已使用的消息?在许多用例中,一旦消耗掉主题就不需要消息了。过滤掉已经消耗掉的消息不是一个好主意(只要有某种消费者注册表)

1 个答案:

答案 0 :(得分:0)

如果正确地将偏移量提交给复制方的使用者组,则不应复制已经消耗的消息

您的其他进程消耗的消息不会将它们从Kafka主题中删除,并且当Replicator是另一个使用者组的一部分时,它将不知道消耗了什么