在Kafka Connect中,如何连接多个kafka集群?

时间:2021-05-07 06:08:28

标签: apache-kafka apache-kafka-connect

我将 kafka 连接集群设置为分布式模式,我想与多个 kafka 集群建立连接,而不仅仅是多个代理。 可以使用 bootstrap.servers 中的 connect-distributed.properties 设置目标代理。 所以,首先,我从 kafka-cluster-A 设置 broker1,如下所示:

bootstrap.servers=broker1:9092

当然,效果很好。

然后,我从 kafka-cluster-B 添加了 broker2,如下所示:

bootstrap.servers=broker1:9092,broker2:9092

因此,这两个代理位于不同的集群中。 这根本不起作用。 没有任何错误,它只是卡住了,并且没有响应请求,例如通过 REST API 创建连接器。

如何连接多个 kafka 集群?

1 个答案:

答案 0 :(得分:0)

据我所知,您只能将一个 Kafka Connect worker 连接到一个 Kafka 集群。

如果您想要使用 Kafka Connect 处理不同集群上的数据,请运行多个 Kafka Connect 工作进程。