什么是将大量数据从本地存储到azure blob存储的最佳方法

时间:2014-12-29 09:01:08

标签: azure azure-storage azure-storage-blobs

我有一个包含65 GB文件的目录,我尝试使用azure存储客户端上传文件,但是看起来太慢了,我看到有一个功能导入/导出由azure blob存储提供,有没有人知道将65 GB数据传输到blob存储所需的速度有多快? 什么是将大数据从本地存储到azure blob存储的最佳方法?

1 个答案:

答案 0 :(得分:3)

Azure存储的功能导入/导出实际上是一个"磁盘传输"服务。真正的硬件磁盘托运服务。通过支持的运输公司,只有支持的HDD供应商和专门准备的硬盘驱动器。此服务不适用于65 G的卷。更像是65 TB的数据。

对于大量数据,您有几种选择。

您可以直接使用AzCopy to transfer entire local directories to Azure Storage

如果这仍然很慢,您可以稍微优化一下这个过程:

  • 归档您的文件夹并拆分成卷(例如10 GB卷)
  • 使用AzCopy并行上传每个卷,以将这些卷上传到存储。
  • 在其中创建VM和RDP
  • 在本地下载卷并取消归档
  • 使用AzCopy将原始文件和/或文件夹传输到Azure Stroage