SQL BULK从文件夹中插入CSV

时间:2016-07-26 03:06:22

标签: sql-server loops bulkinsert

我有这个SQL命令,它将在存储过程中使用并将被安排:

BULK INSERT Test101.dbo.Test102
FROM 'C:\Bulk\samp.csv'
WITH
(
    FIELDTERMINATOR = ',',
    ROWTERMINATOR = '\n'
)

它运作良好,但我想要做的是自动处理文件夹中的所有.csv文件(让我们说Bulk文件夹)。我的意思是,用户不必使用文件名定义确切位置,而存储过程将处理该文件夹中的所有.CSV文件,如果存在,则忽略其他文件。

请帮忙。

谢谢。

1 个答案:

答案 0 :(得分:0)

尝试这些以确保您拥有正确的权限和设置来执行xp_cmdshell

在此处启用一次配置更改:https://stackoverflow.com/a/5131503/2628302

--To Test if that worked run these commands. There should be no errors and should return list of files under c:\
declare @files table (ID int IDENTITY, FileName varchar(500))
insert into @files execute xp_cmdshell 'dir c:\ /b'
select * from @files

- 如果没有错误,则继续创建此SP,如下所示。这是完成所有工作的那个

CREATE PROCEDURE dbo.sp_BulkInsAllFilesInDirectory
AS
BEGIN
    --a table to hold filenames 
    Declare   @ALLFILENAMES as TABLE (WHICHPATH VARCHAR(255),WHICHFILE varchar(255))

    --some variables
    declare @filename varchar(255),
            @path     varchar(255),
            @sql      varchar(8000),
            @cmd      varchar(1000)


    --get the list of files to process:
    SET @path = 'C:\Bulk\'
    SET @cmd = 'dir ' + @path + '*.csv /b'
    INSERT INTO  @ALLFILENAMES(WHICHFILE)
    EXEC Master..xp_cmdShell @cmd
    UPDATE @ALLFILENAMES SET WHICHPATH = @path where WHICHPATH is null


    --cursor loop
    declare c1 cursor for SELECT WHICHPATH,WHICHFILE FROM @ALLFILENAMES where WHICHFILE like '%.csv%'
    open c1
    fetch next from c1 into @path,@filename
    While @@fetch_status <> -1
      begin
          --bulk insert won't take a variable name, so make a sql and execute it instead:
           set @sql = 'BULK INSERT Temp FROM ''' + @path + @filename + ''' '
               + '     WITH ( 
                       FIELDTERMINATOR = '','', 
                       ROWTERMINATOR = ''\n'', 
                       FIRSTROW = 2 
                    ) '
        print @sql
        exec (@sql)

        fetch next from c1 into @path,@filename
      end
    close c1
    deallocate c1

END

---通过像这样运行来测试它(从C:\ BULK \目录中的一个csv文件开始。如果它适用于一个,它很可能适用于多个文件。

EXEC dbo.sp_BulkInsAllFilesInDirectory

查看是否有错误。在这里留言,明天我会检查。祝你好运。