在kafka上写同一主题

时间:2017-07-24 17:44:58

标签: c# apache-kafka kafka-producer-api confluent-kafka

在confluent-kafka-dotnet v0.9.5上使用ProduceAsync方法写入Kafka上的相同主题时,它是否会覆盖默认分区和偏移量(P0,O0)上的数据,还是会写入下一个可用的偏移量在分区?

1 个答案:

答案 0 :(得分:0)

它不会覆盖。请参阅此处的文档Kafka Topics

简要解释

Kafka使用pub-sub机制,这意味着发布商将数据发送到某个主题,并且可以有多个主题。数据将写入当前偏移量,并且将根据消费者偏移量为从该主题读取的任何订户提供数据。根据所需时间间隔或文件所需大小的配置,数据将保留在kafka群集中的磁盘上。