flink背压监测

Question

从我们的Flink项目开始。

由于解析代码繁重，我的群集遭受了低背压。

因此，我将监控脚本放在系统上，该系统不断询问任务管理器的反压状态。 （每20秒运行一次以获得最高值和平均值）

顺便说一下，当我关闭脚本运行时，我发现背压比的增加比我使用脚本时慢得多。

那么有没有有效的方法来获得背压状态而不会失去性能？

Answer 1

我不认为每20秒请求一次背压会对工作流程的性能产生重大影响。

另外，如果你有可用的CPU周期，那么增加进行解析的函数的并行性将是下一步尝试，以提高吞吐量。