将S3增量复制到天蓝色斑点

Question

我正在探索将S3 Blob增量复制到天蓝色Blob的方法。我尝试使用azure数据工厂，但找不到此选项。

S3具有数百万个对象，如果没有增量选项，则需要数小时才能完成。

我愿意探索其他工具/选项。

Answer 1

如果您需要每天/每小时进行增量复制，则应该选择scheduled / tumbling window触发器。 Here是要参考的示例。 ADFv2还支持复制压缩，您可以为s3对象指定压缩类型和压缩级别，单击here了解更多信息。