无法将GCS中的csv文件加载到bigquery中

时间:2016-07-18 13:25:28

标签: google-bigquery

我无法从谷歌云存储加载500mb csv文件到大查询但我收到此错误

Errors:
Too many errors encountered. (error code: invalid)
Job ID  xxxx-xxxx-xxxx:bquijob_59e9ec3a_155fe16096e
Start Time  Jul 18, 2016, 6:28:27 PM
End Time    Jul 18, 2016, 6:28:28 PM
Destination Table   xxxx-xxxx-xxxx:DEV.VIS24_2014_TO_2017
Write Preference    Write if empty
Source Format   CSV
Delimiter   ,
Skip Leading Rows   1
Source URI  gs://xxxx-xxxx-xxxx-dev/VIS24 2014 to 2017.csv.gz 

我已经将500mb csv文件gzip压缩到csv.gz上传到GCS。请帮我解决这个问题

1 个答案:

答案 0 :(得分:0)

您作业的内部详细信息显示读取CSV文件的第1行时出错。您需要进一步调查,但可能是您的标题行不符合文件其余部分的模式,因此我们尝试将标题中的字符串解析为整数或布尔值或类似的东西。您可以设置skipLeadingRows属性以跳过这一行。

除此之外,我会检查您的数据的第一行是否与您尝试导入的架构匹配。

此外,遗憾的是,您收到的错误消息非常无用,因此我在内部提交了一个错误,以使您在此案例中收到的错误更有帮助。