云数据流作业无故失败

时间:2017-01-23 20:58:34

标签: google-cloud-dataflow apache-beam

我有一个使用Apache Beam API(0.4.0)执行的Google Cloud Dataflow作业。管道使用本地运行程序成功运行。当我使用数据流运行器提交作业时,作业被提交,但是在32秒后它失败而没有在任何地方显示原因。日志似乎是空的。 gcloud cli也没有任何帮助:

$ gcloud beta dataflow logs list 2017-01-23_12_51_23-5463584243087329795
E 2017-01-23T21:51:53 2017-01-23_12_51_23-5463584243087329795_00000159cd197209 (cdfde4683948d134): Workflow failed.

如何追踪错误原因?

1 个答案:

答案 0 :(得分:3)

这是因为尚未为您的项目启用Dataflow API。在这里执行第3步:https://cloud.google.com/dataflow/docs/quickstarts/quickstart-java-maven

Dataflow将很快提供更好的错误消息。