得到以下消息:
The Dataflow appears to be stuck. Please reach out to the Dataflow team at http://stackoverflow.com/questions/tagged/google-cloud-dataflow.
我意识到有关于同一错误消息的其他问题,但每个上下文看起来不同,而且消息相当通用,所以我再次发布。
职位编号:2017-09-25_09_27_25-5047889078463721675
请协助。感谢。
编辑:从2.0.0版本更新到Apache Beam SDK for Python 2.1.1后,问题似乎已经消失(至少目前为止)。答案 0 :(得分:1)
Dataflow管道中卡住的常见原因是无法启动工作人员。如果查看Stackdriver日志(在UI中查看日志,然后单击链接转到Stackdriver),您应该能够查看worker_startup
日志。这里的任何问题都可能表明启动工人失败,这会导致工作被卡住。