我经常看到卡夫卡消费者获得当前偏移和滞后设置为未知的问题 早期的消费者有抵消和滞后
GROUP, TOPIC, PARTITION, CURRENT OFFSET, LOG END OFFSET, LAG, OWNER
G.AB_KAFF, T.AB_KAFF, 0, 3, 6, 3, consumer-2
G.AB_KAFF, T.AB_KAFF, 1, 8, 11, 3, consumer-2
当我在几天后再次订阅此消费者时,其偏移和延迟设置为未知
GROUP, TOPIC, PARTITION, CURRENT OFFSET, LOG END OFFSET, LAG, OWNER
G.AB_KAFF, T.AB_KAFF, 0, unknown, 7, unknown, consumer-2
G.AB_KAFF, T.AB_KAFF, 1, unknown, 11, unknown, consumer-2
由于我从主题取消订阅整个消费者群体,kafka是否会删除该消费者以前的偏移量?
答案 0 :(得分:4)
是的,你是对的。kafka是否因为我而删除了该消费者以前的偏移量 从主题中取消订阅整个消费者群体?
offsets.retention.minutes=1440 (24 hours)
默认为24小时
对于偏移主题,以分钟为单位的日志保留时间窗口