如何自动将数据从CSV文件加载到Azure SQL

Question

我正在尝试自动将数据从CSV文件加载到Azure SQL。我尝试遵循该指南https://marczak.io/posts/azure-loading-csv-to-sql/，该指南对较小的文件非常适用，但是当我尝试使用较大的文件时，出现此错误： “状态”：504，       “ message”：“执行超时已到期。在操作完成之前超时或服务器没有响应。\ r \ nclientRequestId：347b83c3-0fd9-414f-8795-ce4843d85ebd”

注意：我正在测试的csv文件与示例中的文件相同，只是带有额外的行。

我对天青只是一个新手，所以任何帮助都会很棒

Answer 1

您可以尝试使用Data Factory帮助您将csv文件滑动到Azure SQL数据库。

请参考本教程：Copy data from Azure Blob storage to a SQL database by using Azure Data Factory：

在本教程中，您将使用Azure数据工厂用户界面（UI）创建数据工厂。该数据工厂中的管道将数据从Azure Blob存储复制到SQL数据库。本教程中的配置模式适用于从基于文件的数据存储复制到关系数据存储。

数据工厂具有Trigger the pipeline on a schedule的功能：

在此计划中，您将为管道创建计划触发器。触发器按指定的时间表（例如每小时或每天）运行管道。

此功能可以帮助您自动将数据从CSV文件加载到Azure SQL。

希望这会有所帮助。