并行执行存储过程

时间:2015-03-22 11:31:06

标签: sql-server tsql stored-procedures

我需要并行运行35个存储过程,以减少执行时间。

我遇到了代理人工作here的概念。

该链接建议使用此代码来实现此目的:

CREATE PROCEDURE ExecuteSQL_ByAgentJob_usp(
    @SqlStatemet            VARCHAR(4000),
    @SPNameOrStmntTitle     VARCHAR(100),
    @JobRunningUser         VARCHAR(100) = NULL,
    @JobIdOut               UNIQUEIDENTIFIER OUTPUT
)
AS
BEGIN

    SET NOCOUNT ON;  

    DECLARE @JobId          UNIQUEIDENTIFIER,
            @JobName        VARCHAR(250) = NULL,
            @DBName         VARCHAR(100) = DB_NAME(),
            @ServerName     VARCHAR(100) = @@SERVERNAME


    --Creating Unique Job Name by combining @SPNameOrStmntTitle and a GUID.     
    SET @JobName = @SPNameOrStmntTitle + '_' + CONVERT(VARCHAR(64), NEWID()) 

    --Currently logged user name will be used to execute the job if not provided one.
    IF @JobRunningUser IS NULL
        SET @JobRunningUser = SUSER_NAME()

    --Adds a new job executed by the SQLServerAgent service
    EXECUTE msdb..sp_add_job @job_name = @JobName, @owner_login_name = @JobRunningUser, 
    @job_id = @JobId OUTPUT 

    --Targets the specified job at the specified server 
    EXECUTE msdb..sp_add_jobserver @job_id = @JobId, @server_name = @ServerName 

    --Tell job for its about its first step.
    EXECUTE msdb..sp_add_jobstep @job_id = @JobId, @step_name = 'Step1', @command 
    = @SqlStatemet,@database_name = @DBName, @on_success_action = 3 

    --Preparing the command to delete the job immediately after executing the statements 
    DECLARE @sql VARCHAR(250) = 'execute msdb..sp_delete_job @job_name=''' + @JobName + ''''

    EXECUTE msdb..sp_add_jobstep @job_id = @JobId, @step_name = 'Step2', @command = @sql 

    --Run the job
    EXECUTE msdb..sp_start_job @job_id = @JobId

    --Return the Job via output param.
    SET @JobIdOut = @JobId
END

尽管已经反复阅读过,我仍然不明白它的哪一部分将有助于并行执行存储过程?如果可能的话,请详细说明。我很好奇,知道脚本的哪一部分可以做到这一点。

它被称为:

SET @Itr = 1 --Seeting the initial value.
    SET @RecCount = (
            SELECT COUNT(*)
            FROM   @Scripts
        )

-----------------PART3------------------------------------
    WHILE (@Itr <= @RecCount)
    BEGIN
        SELECT @sql = t.Script
        FROM   @Scripts t
        WHERE  id = @Itr
        --Just o identify the script name getting first 10 char of the SP
        SET @ScriptTitle = LEFT(REPLACE(@sql, 'EXEC ', ''), 10) 

        EXEC ExecuteSQL_ByAgentJob_usp
             @SqlStatemet = @sql,
             @SPNameOrStmntTitle = @ScriptTitle,
             @JobRunningUser = 'sa',
             @JobIdOut = @JobId OUTPUT

它是如何在循环中调用的?但我相信循环的下一次迭代将仅在最后一次执行时开始,那么它又如何并行运行?

3 个答案:

答案 0 :(得分:4)

另外请注意为什么要让35个程序并行执行?对我来说这个要求听起来有点不切实际。

即使您同时执行两个存储过程,也不能保证它们会并行。

执行的并行性取决于其他因素,如查询成本,MXDOP(最大并行度),并行阈值等。

这些属性在服务器级配置上进行操作(MAXDOP除外,可以在查询时指定。

我不能详细介绍,但我的建议是,不依赖于Parallelism以不依赖于并行查询的方式编写代码,同时通过Transactions处理查询的同时执行。

正如提示要并行执行35个程序一样,您需要在Sql Server上安装35个内核并将MAXD​​OP设置为1,然后在准确的时间执行35个进程。对我来说似乎有很多不切实际的要求:)

答案 1 :(得分:3)

你是对的。下一次迭代将在最后一次完成时开始。但是在这里,你在那些迭代中运行的工作而不是实际的语句。所以想象它就像异步方式调用sp_start_job一样。它将刚刚开始工作并立即返回。工作本身可能会继续这样做。

答案 2 :(得分:1)

最好,最简单的方法是创建一个具有并行执行SQL任务的SSIS项目,然后执行该作业。使用SSIS执行此操作的学习曲线是一两个小时,您可以让SQL Server使用尽可能多的资源来尽快执行任务。你不必乱用maxops或其他任何东西 - SSIS会为你做。

要查看执行SSIS作业的不同方法,请尝试以下链接: http://www.mssqltips.com/sqlservertip/1775/different-ways-to-execute-a-sql-server-ssis-package/