保留时间极短的Kafka主题

Question

当我将某个主题的保留时间设置为10分钟时，是否存在明显的缺点？

Answer 1

它不应该有任何缺点，因为它是一个后台进程，但是应该知道，在kafka中，分区被分割成段。当达到配置的时间或大小时，将翻转一个新的段。 kafka不会删除活动的网段，因此根据您的配置和数据加载，它可能会也可能不会删除网段。要获得所需的结果，请同时检查以下代理配置

1. 日志保留检查频率-offsets.retention.check.interval.ms
2. 日志保留时间-log.roll.ms
3. log.segment.delete.delay.ms
4. 日志清理器配置