kafka connect是否支持分布式模式的主动 - 主动模式?

时间:2017-02-01 09:21:46

标签: apache-kafka apache-kafka-connect confluent

在分布式模式下测试kafka connect时,我们发现它可以在待机模式而不是主动模式下工作。

如果我们有一个双成员群集,则一次只有一个用于HDFS接收器连接器,另一个等待待机状态。如果第一个死亡或被中断,那么第二个等待的人将接受操作。

它是否支持在单个群集组ID下通过不同的接收器名称为HDFS协同工作的方式,如果其中一个发生故障,则刷新操作根本不会中断,因为第二个正在运行并将数据推送到HDFS?

1 个答案:

答案 0 :(得分:0)

将连接器的REST API中的JSON有效负载中的tasks.max值增加到4(基本上高于1)后实现。