自动检测BigQuery的GCS中的更改

Question

现在我有一个BigQuery表，其数据源来自GCS（Google云存储）的某个存储桶。

GCS不断动态变化，添加了新文件。那么，对于BigQuery，我们是否有任何可用的机制来自动检测GCS中的更改并与最新数据同步？

谢谢！

Answer 1

您可以使用一个非常酷的beta功能来做到这一点。签出BigQuery Cloud Storage Transfer。您可以安排转移运行回填，等等。

阅读“限制”以了解它是否对您有用。