每个模式的JDBC Confluent kafka连接器和主题

时间:2018-04-04 22:01:25

标签: apache-kafka apache-kafka-connect confluent-kafka confluent-schema-registry

我们最近开始使用Confluent Kafka-JDBC连接器导入RDBMS数据。

作为默认配置设置的一部分,似乎为架构中的每个表创建了一个主题。

我想知道是否有办法

  1. 创建每个架构的主题而不是每个表。如果启用了每个架构的主题,那么可以在表格的基础上支持架构演进(使用架构注册表)吗?

  2. 如果无法使用每个架构的主题,那么是否有关于如何管理数百个或数千个主题的指南?考虑到表数与主题数之间会有一对一的映射吗?

  3. 提前致谢,

1 个答案:

答案 0 :(得分:2)

  

为每个架构而不是每个表创建主题。

不 - 它是 n 表 - > n 主题,或1个查询 - > 1个主题。

  

有关如何管理数百或数千个主题的任何指导原则?

为它们采用标准命名模式。根据需要使用特定于主题的配置。