为什么kafka消费者没有收听第一条消息?

时间:2016-05-02 23:54:44

标签: apache-kafka kafka-consumer-api kafka-producer-api

在我的测试程序中,我开始倾听。然后循环发送消息。 如果我发送一条消息,则不会列出该消息。如果我发送2条消息,它会收听一条消息。如果我发送3条消息,它会收听2条消息。为什么会这样?

生产者

KeyedMessage<String, byte[]> message = new KeyedMessage<String, byte[]>(topic, serializedBytes);

if (log.isDebugEnabled()) {
    log.debug("producing messages to topic : " + topic + "file : " + payload.get("name"));
}

for (int i = 0; i < 3; i++) {
    producer.send(message);
    System.out.println("producing ..");
}

消费

public void run() {

    try {
        ConsumerIterator<byte[], byte[]> itr = m_stream.iterator();
        log.info("Kafka listener is ready to listen..");
        System.out.println("listens....");

        while (itr.hasNext()) {
            byte[] data = itr.next().message();
            System.out.println("Message received : " + data);
        }
    }
}

消费者资产

enable.auto.commit=true

auto.commit.interval.ms=101

session.timeout.ms=7000

key.deserializer=org.apache.kafka.common.serialization.StringDeserializer

zookeeper.connect=zk1.xx\:2181

heartbeat.interval.ms=1000

auto.offset.reset=smallest

serializer.class=kafka.serializer.DefaultEncoder

bootstrap.servers=kk1.xx\:9092

group.id=test

consumer.timeout.ms=-1

fetch.min.bytes=1

receive.buffer.bytes=262144

1 个答案:

答案 0 :(得分:1)

我通过在我的制作人中设置以下属性来修复此问题。

ArrayList