标签: hadoop apache-kafka flume
我正在将数据发送到具有多个分区的kafka主题。
例如,一个具有10个分区的主题,我想基于分区(在多个hdfs目录中)将数据保存在hdfs路径中。
例如,我的hdfs路径目录应类似于: / topicname / partition1, / topicname / partition2等。
我正在使用Kafka频道-org.apache.flume.channel.kafka.KafkaChannel。