将数据上传到Big Query

时间:2017-06-24 21:54:21

标签: google-cloud-platform

有没有办法解压缩已加载到Google Cloud Platform中的文件。

我有一个33GB的Zip文件,其中包含转发到Google Big Query的CSV文件。

如果解压缩,则文件大小超过215GB。

有没有办法加载Zip文件并在GCP中解压缩而不是尝试上传215GB的原始数据?

感谢。

1 个答案:

答案 0 :(得分:0)

如果它被gzip压缩,那么您可以从Google云存储加载到BigQuery。否则,我不相信有一种方法可以在GCS中解压缩。

一种选择是启动具有足够硬盘空间(最好是SSD)的Google Compute Engine,随意执行任何操作,然后从那里推送到GCS,然后关闭计算引擎