bq shell加载一个^分隔文件

时间:2014-07-23 20:40:19

标签: google-bigquery

我们无法找到使用bq shell将^分隔文件推送到大查询的方法。在用户界面上,可以选择除“'”之外的分隔符。

任何帮助都将受到高度赞赏。

谢谢, 和Manish

1 个答案:

答案 0 :(得分:7)

这就是我将维基百科综合浏览量日志上传到BigQuery的方式(它们是空格分隔的,对字符串不使用引号):

bq load -F" "
        --quote "" \
        fh-bigquery:wikipedia.pagecounts_20140411_08 \
        pagecounts-20140411-080000.gz
        language,title,requests:integer,content_size:integer

-F" "表示一个空格分隔的文件(对于您的用例有一个'^'),--quote ""通知BigQuery有关不使用引用的信息。然后我表示目标表的名称,源文件以及该文件的5列。

(维基百科网页浏览量转储http://dumps.wikimedia.org/other/pagecounts-raw/