Spring Cloud Producer异常-java.lang.IllegalStateException:关闭生产者后无法执行操作

时间:2019-09-12 12:42:20

标签: spring apache-kafka cloud producer

Spring Cloud Producer引发异常-java.lang.IllegalStateException:关闭生产器后无法执行操作

嗨 我们提供了一个基于Spring Cloud的微服务应用程序。在该应用程序中,向Kafka生成消息时出错。我们正在使用以下Spring Cloud版本。

Spring Cloud版本

Greenwich.SR1

以下是卡夫卡生产商使用的接口定义

    String INPUT = "jobmanager-in";
String OUTPUT_C = "collection-out";
String OUTPUT_P = "parser-out";
String OUTPUT_CMP = "compare-out";
String OUTPUT_R = "report-out";
String OUTPUT_N = "notification-out";

@Input(INPUT)
SubscribableChannel inboundJobManager();

@Output(OUTPUT_C)
    MessageChannel outboundCollections();

@Output(OUTPUT_P)
MessageChannel outboundParse();

@Output(OUTPUT_CMP)
MessageChannel outboundCompare();

@Output(OUTPUT_R)
MessageChannel outboundReport();

@Output(OUTPUT_N)
MessageChannel outboundNotification();

生产者代码为

public void sendCollectionTask(final MessageT message) {

        logger.info("Sending Collection Task :: " + message.toString());
        MessageChannel messageChannel = collectionStream.outboundCollections();
        boolean l_bool = messageChannel.send(MessageBuilder.withPayload(message)
                .setHeader(MessageHeaders.CONTENT_TYPE, MimeTypeUtils.APPLICATION_JSON).build());
        logger.info("After sending message for Collection Task send status :: " + message.getTask().getId() + " : "
                + l_bool);
    }

启动应用程序时,生产者会正确生成消息,但是一段时间后,我们会收到错误消息

2019-09-12 02:07:45,215 ERROR com.ericsson.tmo.cm.ccm.jobmanager.util.JobOrchestrator [scheduling-1] Error Trace ::
org.springframework.messaging.MessageHandlingException: error occurred in message handler [org.springframework.cloud.stream.binder.kafka.KafkaMessageChannelBinder$ProducerConfigurationMessageHandler@11328ab9]; nested exception is java.lang.IllegalStateException: Cannot perform operation after producer has been closed
        at org.springframework.integration.support.utils.IntegrationUtils.wrapInHandlingExceptionIfNecessary(IntegrationUtils.java:189)
        at org.springframework.integration.handler.AbstractMessageHandler.handleMessage(AbstractMessageHandler.java:179)

如果重新启动应用程序,则问题已解决。 感谢您的帮助。

我们的Spring Cloud Config是

cloud:
    stream:
      kafka:
        binder:
          brokers: kafka
          autoCreateTopic: false
          configuration:
            auto.offset.reset: latest
            max.request.size: 16777216
            buffer.memory: 67108864
      bindings:
        collection-out:
          destination: collection
          contentType: application/json
          group: collection
          producer:
            partitionCount: 5
            autoAddPartitions: true

1 个答案:

答案 0 :(得分:0)

清除异常消息。

  

关闭生产者后无法执行操作

您的生产者可能被一个线程关闭,而在另一个线程上,生产者正在调用send()或生产者网络线程仍在发送消息。


由于您使用的是Spring,因此我想为您创建了KafkaProducer对象,并通过依赖注入将其注入。

您需要做的就是找出使用相同对象的人 KafkaProducer和调用close()的对象。

可能的原因

  1. 有时,相同 KafkaProducer可能被同一应用程序的其他几个组件(如果您未在多个生产者之间划定界限)和其中之一使用可能已经关闭了。

    更清楚,也许您正在使用相同的生产者bean实例来为同一实例中某个地方的不同组件生成消息。

    通常,由于针对不同类型的数据具有不同的生产者配置和主题,因此我们有不同的生产者针对不同的主题进行生产。

  2. 当我添加一个关闭钩子时遇到了类似的异常,当另一个线程试图产生该钩子时,我正在调用producer.close()