BigQuery可以从Google云端硬盘中读取联合来源。见here。我希望能够将BigQuery中的表读入指向Drive文档的Dataflow管道中。
将BigQuery挂钩到Drive中的文件非常合适:
但是,当我尝试将该表读入我的Dataflow管道时,我(可以理解)得到以下错误:
找不到合适的凭据来访问Google云端硬盘。联系 表所有者寻求帮助。
[..]
PCollection<TableRow> results = pipeline.apply("whatever",
BigQueryIO.Read.fromQuery("SELECT * from [CPT_7414_PLAYGROUND.google_drive_test]"))
.apply(ParDo.of(new DoFn<TableRow, TableRow>() {
[..]
如何权限Dataflow能够从BigQuery中指向Drive的表中读取?
答案 0 :(得分:1)
Dataflow当前不支持从Drive支持的联合表中读取,但这很快就会到来。