如何在Kafka Connect中水平缩放

时间:2018-07-17 09:25:15

标签: apache-kafka apache-kafka-connect

我有一个包含10个任务的分布式kafka连接器,只需启动具有相同配置(group.id等)的另一个进程,即可让Kafka在这些进程中平均分配任务。

但是,我想控制每个流程中可用的任务数量。我可以在Kafka中创建另一个具有不同数量任务的连接器吗?尽管我看不到任何将一个进程与仅一个kafka连接器相关联的机制,并且怀疑Kafka可以将它们平均分配。

有什么建议吗?

0 个答案:

没有答案