我有一个Kafka(0.10.2.0)群集,在一台计算机上有10个分区(有10个单独的kafka服务器端口),这个主题名为" test"
并且在7台机器上有一个Flink Cluster,包含294个任务槽,在这个Flink集群上运行Flink app并行250,使用FlinkKafkaConsumer010从Kafka Server使用一个组ID" TestGroup"。
但我发现只有2个flink ips与171 tcp连接已经与kafka集群建立,更糟糕的是,只有10个连接是传输数据,只有这10个连接从头到尾传输了数据。
我已经检查了这个Reading from multiple broker kafka with flink,但在我的情况下不起作用。
感谢您的任何信息,谢谢。