在分布式模式下测试kafka connect时,我们发现它可以在待机模式而不是主动模式下工作。
如果我们有一个双成员群集,则一次只有一个用于HDFS接收器连接器,另一个等待待机状态。如果第一个死亡或被中断,那么第二个等待的人将接受操作。
它是否支持在单个群集组ID下通过不同的接收器名称为HDFS协同工作的方式,如果其中一个发生故障,则刷新操作根本不会中断,因为第二个正在运行并将数据推送到HDFS?
答案 0 :(得分:0)
将连接器的REST API中的JSON有效负载中的tasks.max值增加到4(基本上高于1)后实现。