您可以使用Data Factory从S3复制到Azure并将结果通过管道传输到BCP吗?

时间:2018-06-21 15:13:43

标签: amazon-web-services powershell azure

假设我在S3上有大量数据,并且想将其移动到Azure中的SQL表。我编写了一个Powershell脚本,一旦有了文件,便会执行此操作。

执行此操作的一种方法是仅将文件复制到Azure,然后执行脚本。有没有一种更有效的方法,不需要先完全复制它们,然后再将它们插入表中?

1 个答案:

答案 0 :(得分:0)

您还可以尝试在1xVM中合并两个存储...

只是一个想法: 在Azure 1x VM中 安装:Azure Blobstorage 坐骑:S3斗

开始:从S3复制到新的Azure存储。 请注意,这家云提供商之间的性能和成本

例如:Azure网站上的下载带宽有限,您需要支付更多带宽...

云的推荐方式是:DataFactory,请阅读: https://docs.microsoft.com/de-de/azure/data-factory/connector-amazon-simple-storage-service

祝你好运