BigQuery自动检测架构导致Google云端硬盘CSV加载失败

时间:2017-03-22 16:47:47

标签: csv google-api google-bigquery

我一直在使用BigQuery并通过从http地址获取CSV来加载我的数据,使用Drive API将其上传到Google云端硬盘,然后使用BigQuery API将其附加到BigQuery。

我总是通过API指定自动检测模式,并且它在cron上完美运行直到2017年3月16日。

3月16日它停止了工作。 CSV仍可正常加载到Google云端硬盘,但BigQuery无法接收它。

我通过尝试使用BigQuery UI手动加载相同的CSV开始进行故障排除,并注意到一些奇怪的事情:使用自动检测模式似乎阻止了加载CSV,因为当我手动输入模式时,它会加载正常。< / p>

我想也许一些流氓数据可能是问题所在,但是现在即使使用非常基本的测试表,自动检测模式对我来说也不起作用,例如...

id名称 1保罗 2彼得

是否有其他人发现自动检测架构突然停止工作。

可能API上的某些默认设置已更改?

1 个答案:

答案 0 :(得分:0)

我无法在今天的GDrive上工作 - 3月23日。

注意:第一次使用BigQuery / Google Cloud Storage。

我有一个大型的公共汽车站134MB。

尝试将其上传到GDrive,但无法将其导入大查询。

刚试过谷歌云存储桶,它运行正常。