Question

我对连接池的理解是;如果连接字符串完全相同，那么我们重用连接而不是建立新连接。

我的问题是我正在为并行处理创建许多线程。在这个“虚拟”程序中，我创建了500个线程，让ThreadPool函数处理线程。

步骤如下：

每个线程在SQL中生成一个更新表。（说明更新的时间戳）
然后线程在1到10秒之间休眠（随机）。
最后，线程在SQL中进行另一次更新（说明结束时间的时间戳）

然后线程退出

class Program
{
    static void Main(string[] args)
    {
        int numberOfThreads = 150;

        ThreadPool.SetMinThreads(numberOfThreads, numberOfThreads);
        ThreadPool.SetMaxThreads(numberOfThreads, numberOfThreads);

        List<Int64> chunkList = new List<Int64>();

        int maxNumberOfChunks = 500;
        for (int i = 1; i < maxNumberOfChunks; i++)
        {
            chunkList.Add(i);
        }

        foreach (Int64 chunk_id in chunkList)
        {
            ThreadPool.QueueUserWorkItem(new WaitCallback(ThreadWorker), new arguments { chunk_id = chunk_id });
        }
        Console.ReadLine();

    }
    static void ThreadWorker(Object stateInfo)
    {
        arguments arguments = (arguments)stateInfo;

        Console.WriteLine("Chunk # : {0} is set to START", arguments.chunk_id);
        UpdateSQLdb(arguments.chunk_id, DateTime.Now, null, null, "START", null, null);

        Random random = new Random();
        int mseconds = random.Next(1, 10) * 1000;
        System.Threading.Thread.Sleep(mseconds);
        Console.WriteLine("Chunk # : {0} is sleeping for {1} sec.", arguments.chunk_id, mseconds);

        Console.WriteLine("Chunk # : {0} ist set to END", arguments.chunk_id);
        UpdateSQLdb(arguments.chunk_id, null, DateTime.Now, null, "END", null, null);
    }
    struct arguments
    {
        public Int64 chunk_id;
    }

    static void UpdateSQLdb(Int64 CHUNK_ID, DateTime? START_TS = null, DateTime? END_TS = null, Enum CHUNK_STATUS = null, string error_messages = null, byte? NEW_CALCULATION_ATTEMPTS = null, byte? NEW_POSTPROCESS_ATTEMPTS = null)
    {
        using (SqlConnection conn = new SqlConnection("Data Source=C55S01;Initial Catalog=MCS_BATCH;Integrated Security=SSPI;Asynchronous Processing=True")) //Timeout=60;Max Pool Size=200;Pooling=True;
        {
            int result = -1;
            conn.Open(); //<-- Each time I open a connection. It creates a new instead of reusing one from the ConnectionPool

            try
            {
                using (SqlCommand cmd = new SqlCommand("TEST.UpdateSQL", conn))
                {
                    cmd.CommandTimeout = 300; 
                    cmd.CommandType = System.Data.CommandType.StoredProcedure;

                    cmd.Parameters.Add("@CHUNK_ID", SqlDbType.BigInt, 15).Value = CHUNK_ID;
                    cmd.Parameters.Add("@START_TS", SqlDbType.DateTime2, 7).Value = START_TS;
                    cmd.Parameters.Add("@END_TS", SqlDbType.DateTime2, 7).Value = END_TS;
                    cmd.Parameters.Add("@ERR_MESSAGE", SqlDbType.VarChar).Value = error_messages;
                    cmd.Parameters.Add("@ReturnValue", System.Data.SqlDbType.Int, 4).Direction = System.Data.ParameterDirection.ReturnValue;

                    try
                    {
                        result = cmd.ExecuteNonQuery();

                        int return_value = (int)cmd.Parameters["@ReturnValue"].Value;
                        if (return_value != 0)
                        {
                            Console.WriteLine("1. Error in running TEST.UpdateSQL, return value is : {0}", cmd.Parameters["@ReturnValue"].Value);
                        }
                    }
                    catch (SqlException ex)
                    {
                        UpdateSQLdb(CHUNK_ID, null, DateTime.Now, null, ex.Message.ToString(), null, null);
                        Console.WriteLine("2. Error executing TEST.UpdateSQL : {0}", ex);
                    }
                }
            }
            catch (Exception ex)
            {
                Console.WriteLine("3.Error in TEST.UpdateSQL : {0}", ex);
                throw;
            }
            if (conn.State == ConnectionState.Open)
            {
                Console.WriteLine("Closing connection....");
                conn.Close();
            }
            conn.Dispose();
        }
    }
}

}

我的问题是我收到了 System.InvalidOperationException未处理 （超时已到期。在从池中获取连接之前已经过了超时时间。这可能是因为所有池连接都在使用中并且达到了最大池大小。）

我已经监控了SQL服务器上的连接数，并且很快就达到了100个连接（这是池中默认的最大连接数）

如果尝试将这些参数添加到连接字符串： Timeout = 60“Max Pool Size = 200; Pooling = True;

但是这只会将问题推迟到以后的阶段，因为连接池将达到200并且超时将在某个时间点到达。

问题：为什么连续创建连接，而不是重用连接池中的连接？

任何暗示，提示或建议都受到高度赞赏。

Answer 1

这正是你要求它做的。它正在使用池中的连接但你已经给它太多的工作了。如果您有500个线程和200个连接，则每个线程都无法建立连接。你应该拥有与线程一样多的连接。

如果您还有更多工作要做（所有500个线程都忙），那么您必须向用户返回错误或以其他方式限制输入到您的应用程序。

连接池 - 一个进程 - 许多线程

1 个答案: