Apache Flink,Job大获成功-Submissionon在集群上超时

时间:2018-06-27 08:18:03

标签: apache-flink flink-streaming

我们试图用非常复杂的逻辑构建Flink Job来进行价格汇总。

例如以前的版本具有如下图。

在另一个开发迭代之后,我为工作增加了更多的复杂性。 新版本在IDE上运行良好,但是部署到群集失败

  

由以下原因引起:org.apache.flink.runtime.client.JobClientActorSubmissionTimeoutException:向JobManager提交作业超时。

如果我重新配置作业(降低图形复杂度),则可以毫无问题地进行部署。

我的问题是:

  1. 提交到独立集群时,作业图的大小和复杂性是否受到限制?
  2. 是否有可能禁用图形表示法(我怀疑问题是由Graph视图引起的-我的工作在本地起作用)
  3. 是否有任何调试工具,以了解Job提交中发生了什么以及为什么超时?

谢谢。

enter image description here

1 个答案:

答案 0 :(得分:1)

解决方案是使用最新的flink版本(在撰写本文时为1.5)。