是否可以让Cloud Dataproc使用BigQuery Connector读取BigQuery视图?
另外,对于用例来说,其中有一些工作负载在Apache Spark(Dataproc)中运行,而某些工作负载在BigQuery中针对相同数据运行=> 将数据以avro编码格式保存在Google Cloud Storage(GCS)中是否更好? (要么) 最好仅在BigQuery中包含数据,并且是否可以在BigQuery中公开授权视图以供Cloud Dataproc使用BigQuery Connector访问?
答案 0 :(得分:1)
否,这是不可能的,因为BigQuery Connector将BigQuery表导出到GCS,但是BigQuery API目前不支持导出BigQuery Views:
您无法运行从视图中导出数据的BigQuery作业。