kafka消费者的偏移和滞后(通过新的消费者api创建)设置为未知

时间:2016-06-29 06:52:51

标签: apache-kafka producer-consumer kafka-consumer-api

我经常看到卡夫卡消费者获得当前偏移和滞后设置为未知的问题 早期的消费者有抵消和滞后

GROUP, TOPIC, PARTITION, CURRENT OFFSET, LOG END OFFSET, LAG, OWNER  
G.AB_KAFF, T.AB_KAFF, 0, 3, 6, 3, consumer-2
G.AB_KAFF, T.AB_KAFF, 1, 8, 11, 3, consumer-2

当我在几天后再次订阅此消费者时,其偏移和延迟设置为未知

GROUP, TOPIC, PARTITION, CURRENT OFFSET, LOG END OFFSET, LAG, OWNER  
G.AB_KAFF, T.AB_KAFF, 0, unknown, 7, unknown, consumer-2
G.AB_KAFF, T.AB_KAFF, 1, unknown, 11, unknown, consumer-2  

由于我从主题取消订阅整个消费者群体,kafka是否会删除该消费者以前的偏移量?

1 个答案:

答案 0 :(得分:4)

  

kafka是否因为我而删除了该消费者以前的偏移量   从主题中取消订阅整个消费者群体?

是的,你是对的。 offsets.retention.minutes=1440 (24 hours)默认为24小时 对于偏移主题

,以分钟为单位的日志保留时间窗口