Question

我正在尝试使用kafka使用者对象使用错误/不存在的主题名称。以下是我在轮询线之后的日志。

 WARN 19508 --- [ad | producer-1] org.apache.kafka.clients.NetworkClient   : Error while fetching metadata with correlation id 22 : {dummyTopic=LEADER_NOT_AVAILABLE}

它只在控制台上记录警告而不是抛出异常。我想处理这个场景。怎么办？以下是我的消费者代码

    Properties consumerProperties = new Properties();
    //SETTING consumerProperties OBJECT HERE AND USING IT TO CREATE CONSUMER OBJECT
    KafkaConsumer<String, String> consumer =  new KafkaConsumer<>(consumerProperties);
    ConsumerRecords<String, String> records = null;
    try{
                consumer.subscribe(Arrays.asList(topic));
                consumer.listTopics();
                records = consumer.poll(100);           
                LOGGER.info("Returning records to microservice.");
            }
            catch(IllegalArgumentException illegalArgumentException) {

                LOGGER.error("Illegal Argument Exception occurred while subscribing to topic by consumer. Message: "+illegalArgumentException.getMessage());
            }
            catch (KafkaException kafkaException) {
                LOGGER.error("Kafka Exception occurred while consuming records by consumer. Message: "+kafkaException.getMessage());
            }
            catch(Exception exception){
                LOGGER.error("Exception occured while creating consumer object "+exception);
            }

请帮助我解决如何处理kafka消费者不存在的主题名称。对于Producer，它给出了超时异常。

Answer 1

您可以使用Kafkaadmin utils中提供的下述方法。

描述一个给定的主题。Link。如果它返回异常，则主题不存在。
获取所有主题的列表，并查找您的主题是否存在于该列表中。 Link

如何在Kafka中处理错误的主题名称

1 个答案: