从网址上传Google Cloud上的数据

时间:2017-07-28 12:50:03

标签: machine-learning google-cloud-platform

我正在尝试将数据集从公共网址上传到Google Cloud Machine Learning项目,这是最简单的方法吗?

这是源网址https://www.kaggle.com/c/carvana-image-masking-challenge/download/train.zip

有一个简单的解决方案,如下面的代码示例(不工作)?

gsutil cp https://www.kaggle.com/c/carvana-image-masking-challenge/download/train.zip train.zip

1 个答案:

答案 0 :(得分:0)

gsutil cp命令可以在运行gsutil的本地计算机和Google Cloud存储之间复制文件。 (它不支持外部URL作为源或目标。 如果您将zip文件下载到本地计算机,则可以通过gsutil上传到云存储。

如果您在Cloud实例上执行此操作,可能会更快,具体取决于ZIP的大小。

  

从内部部署位置传输数据时,请使用 gsutil

     

从其他云存储提供商传输数据时,请使用 Storage Transfer Service