我可以在单个Kafka-Connector S3接收器连接器中映射具有多个主题的多个存储桶吗？

Question

Google并没有帮助我，所以我想问你。我有很多kafka主题，我想将特定主题的消息存储在特定的S3存储桶中。

我需要为每个存储桶创建一个S3接收器连接器，还是可以在单个S3 json文件中配置所有内容（将存储桶与主题映射）？

感谢您的帮助！ ：）

Answer 1

S3存储桶名称为specified per-connector，因此您需要为每个存储桶创建一个连接器。

请注意，您可以为每个连接器（topics / topics.regex指定多个主题，因此，如果要将多个主题放入一个存储桶（但路径不同），则可以只需一个连接器即可完成此操作。但是对于多个存储桶，您将需要多个连接器。