如何重播S3上的Kafka备份

时间:2015-12-03 21:44:15

标签: apache-kafka

我在S3上有Kafka备份,这是每小时的数据。我想重播其中的一些,如何将它们导入主题并再次播放?在这种情况下,我如何控制消耗速度?

1 个答案:

答案 0 :(得分:0)

安装pv,然后运行:

cat $ {files} | pv -L 800000 | 〜/ kafka_2.11-0.8.2.2 / bin / kafka-console-producer.sh --broker-list $ {brokers} --topic $ {topics}