我在AWS中有一个MySQL数据库,我可以将数据库用作Big Query中的数据源。
我将CSV上传到Google云端存储分区并加载到其中。
我想通过直接提供数据源来保持同步,而不是每次都加载它。
答案 0 :(得分:1)
您可以在BigQuery中创建连接到云存储的永久外部表。然后BQ就是接口,而数据驻留在GCS中。它可以连接到单个CSV文件,您可以自由更新/覆盖该文件。但不确定是否可以将BQ链接到一个完整的CSV文件目录,甚至是目录树。
无论如何,请看一下:https://cloud.google.com/bigquery/external-data-cloud-storage