数据流似乎被卡住了

时间:2017-09-25 17:41:50

标签: google-cloud-dataflow

得到以下消息: The Dataflow appears to be stuck. Please reach out to the Dataflow team at http://stackoverflow.com/questions/tagged/google-cloud-dataflow.

我意识到有关于同一错误消息的其他问题,但每个上下文看起来不同,而且消息相当通用,所以我再次发布。

职位编号:2017-09-25_09_27_25-5047889078463721675

请协助。感谢。

编辑:从2.0.0版本更新到Apache Beam SDK for Python 2.1.1后,问题似乎已经消失(至少目前为止)。

1 个答案:

答案 0 :(得分:1)

Dataflow管道中卡住的常见原因是无法启动工作人员。如果查看Stackdriver日志(在UI中查看日志,然后单击链接转到Stackdriver),您应该能够查看worker_startup日志。这里的任何问题都可能表明启动工人失败,这会导致工作被卡住。