标签: google-cloud-dataflow apache-beam
BigQueryIO.Read函数将返回TableRow的PCollection,但是如何获取刚刚运行的查询的作业ID?
也许我可以传入自定义作业ID,但是我想知道是否有任何方法可以从数据流作业信息本身中读取此信息。
答案 0 :(得分:1)
如果您查看与读取操作有关的日志记录,则PTransform将记录BigQuery作业ID。举例来说,我最近运行的一项测试工作: