从云存储导入BigQuery时出现后端错误

时间:2013-09-10 02:05:39

标签: google-bigquery

最近,从云存储导入到BigQuery时,我们已经开始看到许多错误:

等待工作_72ae7db68bb14e93b7a6990ed628aedd ...(153s)当前状态:RUNNING 加载操作中的BigQuery错误:后端错误

等待工作_894172da125943dbb2cd8891958d2d10 ...(364s)当前状态:RUNNING 加载操作中的BigQuery错误:后端错误

这个过程每小时运行一次,之前已经稳定了很长时间。导入脚本或正在加载的数据类型没有任何变化。如果您需要更多信息,请与我们联系。

1 个答案:

答案 0 :(得分:0)

我在BigQuery日志中查找了这些作业 - 它们似乎都成功了。您可能遇到的错误是读取作业状态。我提交了一个内部错误,我们应该区分作业中的错误和在bq工具中获取作业状态的错误。

作业运行后,您可以使用bq show -j <job_d>查看作业的实际状态。如果它仍在运行,您可以运行bq wait <job_id>

我还看了一下前端日志;这些作业ID的所有状态请求都返回了HTTP 200(成功)代码。

是否可以将--apilog=file.txt参数添加到bq命令行(您需要将其添加到命令行的开头,如bq --apilog=file.txt load ...中)并发送一个案例的输出你又失败了?如果您担心敏感数据,请随时将其直接发送给我(谷歌的tigani)。

谢谢/ 乔丹蒂加尼/ Google BigQuery工程师