kafka 0.8.2.0的默认序列化程序

时间:2015-02-27 00:15:00

标签: apache-kafka

我正在使用他们的新KafkaProducer API设置Kafka生产者并获得以下错误

Exception in thread "main" org.apache.kafka.common.config.ConfigException: Missing required configuration "key.serializer" which has no default value.
at org.apache.kafka.common.config.ConfigDef.parse(ConfigDef.java:124)
at org.apache.kafka.common.config.AbstractConfig.<init>(AbstractConfig.java:48)
at org.apache.kafka.clients.producer.ProducerConfig.<init>(ProducerConfig.java:235)
at org.apache.kafka.clients.producer.KafkaProducer.<init>(KafkaProducer.java:129)
at com.kafka.producer.App.KafkaProducer(App.java:43)
at com.kafka.producer.App.main(App.java:33)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:483)
at com.intellij.rt.execution.application.AppMain.main(AppMain.java:134)

http://kafka.apache.org/documentation.html#newproducerconfigs似乎没有默认的序列化程序和文档,我看不到可能的值。

这个问题适用于Kafka 0.8.2.0版本

2 个答案:

答案 0 :(得分:25)

早期版本的Kafka带有默认的序列化程序,但这造成了很多混乱。

使用0.8.2时,您需要自己从StringSerializer或ByteArraySerializer中选择一个序列化程序,该序列化程序附带API或构建您自己的。

可以在以下位置找到API序列化程序 StringSerializer: http://kafka.apache.org/082/javadoc/org/apache/kafka/common/serialization/StringSerializer.html ByteArraySerializer: http://kafka.apache.org/082/javadoc/org/apache/kafka/common/serialization/ByteArraySerializer.html

因此,如果您希望使用默认的序列化程序,那么您的解决方案是使用以下选项之一。

props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");

props.put("key.serializer", "org.apache.kafka.common.serialization.ByteArraySerializer");

答案 1 :(得分:7)

假设您需要StringSerializer,请使用:

props.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG,StringSerializer.class.getName());
props.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG,StringSerializer.class.getName());

此处的完整示例:https://github.com/CameronGregory/kafka/blob/master/TestProducer.java