将Azure BLOB存储同步到Amazon S3

时间:2018-03-14 16:46:33

标签: amazon-s3 azure-storage

我们在Azure BLOB存储中存储大约400万个文件(4 TB左右)的杂项文件,主要是Word和PDF。我希望在不同的云中复制这些数据,以实现灾难恢复和安心,而亚马逊S3似乎与任何人一样好。

麻烦的是,我没有足够大的本地服务器来保存这些文件的本地副本。理想情况下,我想要从Azure Blob同步到S3。我们不断添加新文件,因此同步也需要频繁(每天多次)。

我看到很多从Azure下载到本地的选项=>从本地上传到S3,但直接Azure => S3同步。这里有什么好的选择?

2 个答案:

答案 0 :(得分:-1)

Tim,有多种方法可以在Azure中成功管理灾难恢复计划,无论是通过使用复制GRS(默认情况下是为Azure存储启用),都会找到更多详细信息 here OR 通过使用ZRS,可以将数据复制到您的数据可用的配对区域,可以找到更多详细信息 here < / p>

在从Azure移动数据或向Azure移动数据时,我建议您检查 document

如果上述解决方案都不适合您,我建议自动执行将数据从Azure blob复制到其他云提供商的过程。有一些命令行,例如AzureCopy第三方产品,允许将数据从一个云提供商传输到另一个云提供商。 Aws也可能有一些自定义解决方案。

答案 1 :(得分:-1)

我们可以通过node.js包将azure存储数据迁移到amazon s3。 您可以查看 here 提供的完整说明。

您也可以使用 azure 数据工厂进行复制,因为它提供了一个复制工具,可以根据您的需要和传输数据的设置进行修改。 您可以在 Azure data factorycopy tool 上参阅此文档。