KAFKA分区数据每日实现数据

时间:2018-04-27 10:39:54

标签: apache-kafka

Kafka有可能每天将数据存档到某个目录吗? 另外,让我知道是否可以在每日基础上创建一个分区。

1 个答案:

答案 0 :(得分:1)

您可以使用Kafka Connect与Confluent连接器中的DailyPartitioner类将主题数据备份到HDFS或S3

还有用于Kafka开箱即用的本地磁盘的FileSink连接器,但您可能需要自己实现分区器