我正在Azure中做一些工作,需要从互联网上下载大型文件(数据集)。基本上,我们制作了一个虚拟机来运行浏览器,将文件下载到我们的存储帐户。
是否有"浏览器即服务"这会让我只是从URL到Azure存储帐户获取数据文件吗?
答案 0 :(得分:2)
如果您要访问的数据是公开的,则无需设置VM,以便下载此数据并将其上载到存储中。 Azure存储将为您完成。
Azure Blob Storage提供Async Copy
功能,可以从任何可公开访问的URL读取数据,并在blob存储中异步复制此数据。如果您使用的是Windows,则可以使用AzCopy
实用程序执行此操作。
答案 1 :(得分:0)
我认为您应该编写一个WebJob(可以在App Service的上下文中运行的后台服务)。您可以在其中运行可以访问URL的脚本,下载文件并将其存储在存储帐户
中