为每个请求创建新的Kafka Producer对象

时间:2016-05-25 11:35:14

标签: java apache-kafka message-queue

我正在开发一个休息服务,它将基于主题将事件发布到kafka(使用java客户端),不同的主题可以有不同的no。经纪人 我为每个向Kafka发送消息的请求创建了Producer。我认为这是低效的,可以通过维护一批生产者来实现更易于管理,它真的有用吗?请提供建议。

1 个答案:

答案 0 :(得分:1)

您可以使用单个制作人并写入不同的主题(https://kafka.apache.org/090/javadoc/index.html?org/apache/kafka/clients/producer/KafkaProducer.html)。类ProducerRecord提供了一个构造函数,允许指定应写入记录的主题(https://kafka.apache.org/090/javadoc/index.html?org/apache/kafka/clients/producer/ProducerRecord.html

Properties props = new Properties();
props.put("bootstrap.servers", "localhost:4242");
props.put("acks", "all");
props.put("retries", 0);
props.put("batch.size", 16384);
props.put("linger.ms", 1);
props.put("buffer.memory", 33554432);
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

Producer<String, String> producer = new KafkaProducer<>(props);
for(int i = 0; i < 100; i++)
    producer.send(new ProducerRecord<String, String>("my-topic", Integer.toString(i), Integer.toString(i)));

producer.close();