标签: google-bigquery google-cloud-storage
在过去的两周内,我们遇到了一个严重的问题。 文件成功上传到存储桶,并存在于云存储文件夹中,但Big Query无法找到它们(并引发Not Found URIs错误)。或者,Big Query创建了批处理文件夹,但只从文件中获取部分数据。当它试图从GCS获取文件时,看起来它没有获得整个文件列表。
这些问题,尤其是Google云端存储的部分加载,使得Big Query加载机制变得不可靠。
任何想法如何解决?