Question

我使用的是Kafka 0.8.2.1和New Producer API。服务器设置为本地网络中的单个节点问题是生产者在运行一段时间后抛出EOFException（上次检查时间为15分钟），但这似乎并不重要，因为我的生产者在此之后继续工作。

我初始化制作人的方式：

Map<String, Object> configs = new HashMap<>();
configs.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, "192.168.1.101:9092");
configs.put(ProducerConfig.ACKS_CONFIG, "1");
configs.put(ProducerConfig.BLOCK_ON_BUFFER_FULL_CONFIG, "false");
configs.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
configs.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
this.producer = new KafkaProducer<>(configs);

我得到的例外：

WARN  [2015-06-17 02:07:28,896] org.apache.kafka.common.network.Selector: Error in I/O with /192.168.1.101
! java.io.EOFException: null
! at org.apache.kafka.common.network.NetworkReceive.readFrom(NetworkReceive.java:62) ~[kafka-clients-0.8.2.1.jar:na]
! at org.apache.kafka.common.network.Selector.poll(Selector.java:248) ~[kafka-clients-0.8.2.1.jar:na]
! at org.apache.kafka.clients.NetworkClient.poll(NetworkClient.java:192) [kafka-clients-0.8.2.1.jar:na]
! at org.apache.kafka.clients.producer.internals.Sender.run(Sender.java:191) [kafka-clients-0.8.2.1.jar:na]
! at org.apache.kafka.clients.producer.internals.Sender.run(Sender.java:122) [kafka-clients-0.8.2.1.jar:na]
! at java.lang.Thread.run(Thread.java:745) [na:1.8.0_45]

即使我的代码仍然适用于此，我也想知道为什么以及如何防止它。

Answer 1

您是否尝试更改＆＃34; connections.max.idle.ms＆＃34;？默认为15分钟。如果每15分钟看到此错误，请尝试减少此超时。

Answer 2

https://issues.apache.org/jira/browse/KAFKA-3205 建议增加connections.max.idle.ms

kafka生产者在运行期间抛出EOFException

2 个答案: