Flink:增加并行度对吞吐量的影响

时间:2019-06-14 16:01:59

标签: apache-flink flink-streaming

我首先使用Parallelism 1进行工作,然后使用Parallelism 3进行工作。使用Parallelism = 1时,kafka源以每秒〜500条记录的速度读取记录。在Parallelism = 3的情况下,吞吐量分为三个并行度,每个并行度每秒读取约150条记录。请注意,源正在以更高的速率(每秒约1000条记录)来发布记录。

这是预期的吗?我可以想象吞吐量随着并行度的增加而增加,但是保持不变。我在源上检查了Backpressure的状态,它是High

屏幕截图供参考:

平行主义1: Parallelism 1

平行主义3: Parallelism 3

0 个答案:

没有答案