Question

我正在使用@KafkaListener注释在应用程序中使用主题。我需要在运行中的使用者中在运行时更改主题模式，以便可以使用与新模式匹配的新主题。

我尝试了下面的代码，但是它仍然消耗与旧主题模式匹配的主题。在这里，我在应用程序启动时设置了“旧主题模式”。然后，我使用Spring @Scheduler每10秒将模式更新为“ new-topic-pattern”。

Class "KafkaTopicPatternConfig.java":

@Configuration
public class KafkaTopicPatternConfig {

  @Bean
  public String kafkaTopicPattern(Environment env) {
    logger.info("Getting kafka topic pattern");
    String kafkaTopicPattern = "old-topic-pattern";
    return kafkaTopicPattern;
  }
}



Class "Consumer.java":

@Component
public class Consumer implements ConsumerSeekAware{

  @Autowired
  @Qualifier("kafkaTopicPattern")
  private String kafkaTopicPattern;


  @KafkaListener(topicPattern = "#{kafkaTopicPattern}", id = "s4federatorConsumer")
  public void processMessage(@Payload ConsumerRecord<String, Object> record,
        @Header(KafkaHeaders.OFFSET) Long offset,
        @Header(KafkaHeaders.CONSUMER) KafkaConsumer<String, String> consumer,
        @Header(KafkaHeaders.RECEIVED_PARTITION_ID) Integer partitionId) {

        //do something with the consumed message

  }


  @Scheduled(fixedDelay = 10000, initialDelay = 15000)
  public void refreshKafkaTopics() {
    logger.info("Inside scheduler to refresh kafka topics");
    this.kafkaTopicPattern = "new-topic-pattern";
    this.kafkaListenerEndpointRegistry.getListenerContainer("s4federatorConsumer").stop();
    this.kafkaListenerEndpointRegistry.getListenerContainer("s4federatorConsumer").start();
  }
}

Answer 1

您将kafkaTopicPattern设置为-

@Qualifier("kafkaTopicPattern")
private String kafkaTopicPattern;

我看到您正在更新--

this.kafkaTopicPattern = "new-topic-pattern";

但是，如果这两个实例位于不同的实例对象中，则不会刷新注入到侦听器中的“ kafkaTopicPattern”的原始值。因此，您必须确保使用新的模式刷新侦听器对象。

Spring Kafka：在运行时订阅新的主题模式

1 个答案: