我将 kafka 连接集群设置为分布式模式,我想与多个 kafka 集群建立连接,而不仅仅是多个代理。
可以使用 bootstrap.servers
中的 connect-distributed.properties
设置目标代理。
所以,首先,我从 kafka-cluster-A 设置 broker1,如下所示:
bootstrap.servers=broker1:9092
当然,效果很好。
然后,我从 kafka-cluster-B 添加了 broker2,如下所示:
bootstrap.servers=broker1:9092,broker2:9092
因此,这两个代理位于不同的集群中。 这根本不起作用。 没有任何错误,它只是卡住了,并且没有响应请求,例如通过 REST API 创建连接器。
如何连接多个 kafka 集群?
答案 0 :(得分:0)
据我所知,您只能将一个 Kafka Connect worker 连接到一个 Kafka 集群。
如果您想要使用 Kafka Connect 处理不同集群上的数据,请运行多个 Kafka Connect 工作进程。