Question

表

+-----------+--------------+------+-----+-------------------+----------------+
| Field     | Type         | Null | Key | Default           | Extra          |
+-----------+--------------+------+-----+-------------------+----------------+
| id        | int(11)      | NO   | PRI | NULL              | auto_increment |
| name      | varchar(32)  | NO   |     | NULL              |                |
| pid       | varchar(32)  | NO   |     | NULL              |                |
+-----------+--------------+------+-----+-------------------+----------------+

过程：测试

begin
  set @i=0;
  while @i<200 do
    insert into test.table_test
      (name, pid) values ('1', '1');
    set @i=@i+1;
  end while;
end

运行：

mysql> call test();
Query OK, 0 rows affected (17.24 sec)

但是当我用jdbc插入数据时，插入10 ^ 5行只需要大约9秒（如果我使用批量插入，插入10 ^ 5行只需要大约2.4秒）。

java代码：

static String mySqlUrl="jdbc:mysql://127.0.0.1:3306/test?rewriteBatchedStatements=true";

static String sql = "insert into bael_test(name, pid) values(?, ?)"; 

public static void test_mysql_batch(int point){  
    Connection conn=getConn("mysql");  
    clear(conn);
    try {        
        PreparedStatement prest = conn.prepareStatement(sql);        
        long a=System.currentTimeMillis();  
        for(int x = 1; x <= 100000; x++){            
            prest.setString(1, "name");
            prest.setString(2, "pid");
            prest.addBatch();    
            if(x%point==0){
                    prest.executeBatch();      
                    conn.commit();
            }
        }        
        long b=System.currentTimeMillis();  
        print("MySql batch insert 10^5 rows",a,b,point);
    } catch (Exception ex) {  
        ex.printStackTrace();  
    }finally{  
        close(conn);    
    }  
}

那么为什么MySQL插入比JDBC慢？

Answer 1

您的Java代码使用预处理语句，而MySQL代码则不然。

换句话说，如果查询的语法正确，您的过程必须检查循环的每个步骤，以及在准备好的语句只执行此操作时将表定位在磁盘上，并且只需将值插入没有进一步处理的正确位置。

如果您想进行比较，可以使用PREPARE - ＆gt; http://dev.mysql.com/doc/refman/5.0/en/sql-syntax-prepared-statements.html

只是从内存中写出它所以它可能是错误的：

PREPARE stmt1 FROM 'INSERT INTO test.table_test (name,pid) values(?,?)';
while @i<200 do
    EXECUTE stmt1 USING @i, @i;;
    set @i=@i+1;
  end while;
DEALLOCATE PREPARE stmt1;

Answer 2

JDBC代码正在进行扩展插入。

（我们在这里看不到实际的SQL语句，我们看不到SQL文本中第一个位置参数的绑定，只看到第二个和第三个参数。我将做出一个假设（可能错误）JDBC为未绑定参数提供NULL值。）

因此，从JDBC驱动程序发送到MySQL的实际SQL语句的格式为：

INSERT INTO test.table_test (id,name, pid) VALUES (NULL,'name','pid')
,(NULL,'name','pid')
,(NULL,'name','pid')
,(NULL,'name','pid')
,...

但是，在MySQL过程中，您正在执行单独的语句：

INSERT INTO test.table_test (id,name,pid) VALUES (NULL,'name','pid');
INSERT INTO test.table_test (id,name,pid) VALUES (NULL,'name','pid');
INSERT INTO test.table_test (id,name,pid) VALUES (NULL,'name','pid');
INSERT INTO test.table_test (id,name,pid) VALUES (NULL,'name','pid');

扩展插入表单将比单个插入语句更有效。（MySQL为每个语句执行做了很多繁重的工作。）

要从MySQL程序中获得更好的性能，您需要执行以下操作：

BEGIN
  SET @sqltext= 'insert into test.table_test (name,pid) values (''1'',''1'')'; 
  SET @i=1;
  WHILE @i<200 DO
    SET @sqltext = CONCAT(@sqltext,',(''1'', ''1'')');
    SET @i=@i+1;
  END WHILE;
  PREPARE stmt FROM @sqltext;
  EXECUTE stmt;
  DEALLOCATE PREPARE stmt;
END

要从JDBC中获得相同类型的降级性能，您需要执行单独的INSERT语句。

这是你所看到的巨大性能差异的最大贡献者。

这并不是说这是唯一的区别，但这解释了你在执行程序时看到的17秒的大部分时间。单个扩展插入的过程可能比运行200个单独的插入快100倍。

你仍然留有性能差异，但至少你可以更接近于将苹果与苹果进行比较。

为什么MySQL插入比JDBC慢？

2 个答案: