对于分析/报告特定项目,我需要将Web API响应中的数据提取到Azure SQL Table / Azure Data Lake中。 我对使用WebJobs Vs DataFactory进行数据摄取感到困惑。
我应该使用Azure SQL Table还是Azure Data Lake?
答案 0 :(得分:0)
Azure SQL数据库是一个SQL Server。 Azure Data Lake可以被视为一个无限的" HDD。 选择将取决于您想要存储和使用数据的方式,音量也是如此。 如果需要存储大量结构化数据,还应考虑Azure SQL Datawarehouse。
要摄取数据,您有几种解决方案。你可以看看这个链接: - https://docs.microsoft.com/en-us/azure/data-factory/data-factory-azure-copy-wizard - https://docs.microsoft.com/en-us/azure/azure-functions/functions-compare-logic-apps-ms-flow-webjobs
Azure数据工厂旨在加载大量数据(数百万条记录)。