将具有不同架构的多个Excel文件加载到SQL Server

Question

我有大约300个带有销售数据的Excel文件，但是不同的架构（一个有一个名为＆＃34的列;产品名称＆＃34; ，另一个只有＆＃34;产品＆＃34; ）但包含有关不同商店销售的相同信息。这些文件是由某些人手动生成的，因此也可以进行拼写错误。有没有很好的方法来导入这些数据，或者我必须在SSIS中创建300个ETL包？

Answer 1

您可以通过以下步骤执行此操作

• 获取所有Excel文件
• 对于每个文件

• 获取列名和工作表名称的脚本任务

• 在ssis中存储列名和工作表名称 变量

编辑：你不能轻易做任何关于拼写错误的事情，我能做的最简单的事情就是让字典表准备好了预期值和模糊匹配转换以检查字典表

• 对于每张表

• 创建阶段表的SQL任务（如果不存在）

• 从Excel工作表中读取并插入表格的脚本任务

很容易找到如何使用c＃动态读取excel文件的列名。我已经用vb做了类似的事情，但下面是一个如何处理c＃的例子。

工作表名称

• Using Excel OleDb to get sheet names IN SHEET ORDER

列名

• Get column names from excel file of a specific sheet using c# with OleDbConnection

此外，这家伙正在使用开箱即用的ssis excel数据流

动态加载所有文件

• https://social.msdn.microsoft.com/Forums/sqlserver/en-US/53f08f44-e996-48ca-9f72-b7dfc5d9136b/import-different-excel-file-with-different-schema-to-different-table-in-sql-server?forum=sqlintegrationservices

要创建表，您需要创建SQL语句以创建表，然后创建要插入到您创建的表中的SQL语句。