Question

我的经纪人中有一个名为“ test”的主题。我使用CLI进行了检查。

我创建了一个Java生产者来向主题test发送消息。我可以从CLI中使用它们。

.\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning（我正在Windows上运行）

但是，当我在Java Consumer程序中运行它时，即使将auto.offset.reset设置为earliest，它也不会消耗任何消息。我究竟做错了什么？

public class Consumer1 {

    public static void main(String[] args) {

        Properties props = new Properties();
        props.put("bootstrap.servers", "localhost:9092");
        props.put("group.id", "jin");
        props.put("enable.auto.commit", "true");
        props.put("auto.offset.reset", "earliest");
        props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");

        KafkaConsumer<String, String> consumer = new KafkaConsumer<String, String>(props);

        //consumer.subscribe(Collections.singletonList("test"));
        consumer.subscribe(Arrays.asList("test"));

        try {
            while (true) {              
                ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
                //ConsumerRecords<String, String> records = consumer.poll(100);
                for (ConsumerRecord<String, String> record : records){
                    System.out.printf("offset = %d, key = %s, value = %s", record.offset(), record.key(), record.value());
                }
                //consumer.commitAsync();               
            }
        } catch (Exception e){
            e.printStackTrace();
        } finally {
            consumer.close();
            System.out.println("closed");
        }   
    }
}

Answer 1

auto.offset.reset如果这是一个全新的消费群，或者如果消费群偏移量被删除，则此属性将生效。它不适用于已经在Kafka中存储了偏移量的消费者组

当Kafka中没有初始偏移量或服务器上不再存在当前偏移量时（例如因为该数据已被删除），该怎么办：

我的Java使用者即使使用auto.offset.reset也无法读取来自Broker的消息-最早

1 个答案: