Question

我试图在循环中插入文本文件中的大量项目。循环显然是一个while循环发送一个命令sendtodb文本文件的每一行。使用本地数据库这是非常快的（190万个插件需要大约4个小时），但是当在远程mysql服务器上执行此操作时，它会像每秒一次插入一样，这需要数天或数周！有什么想法吗？

    private void sendtodb(string image, string title, string content, int cat)
    {
        string cs = @"the connection string";
        MySqlConnection conn = null;
conn = new MySqlConnection(cs);
            conn.Open();
        try
        {

            MySqlCommand cmd = new MySqlCommand("", conn);

            cmd.CommandText = "INSERT INTO wp_posts (post_author, post_date, post_date_gmt, post_content, post_title, post_excerpt,post_status,comment_status,ping_status,post_password,post_name,to_ping,pinged,post_modified,post_modified_gmt,post_content_filtered,post_parent, guid,menu_order,post_type,post_mime_type,comment_count) "
                + "VALUES (@post_author, @post_date, @post_date_gmt, @post_content, @post_title, @post_excerpt,@post_status,@comment_status,@ping_status,@post_password,@post_name,@to_ping,@pinged,@post_modified,@post_modified_gmt,@post_content_filtered,@post_parent, @guid, @menu_order, @post_type, @post_mime_type, @comment_count)";

            //  cmd.Parameters.Add("?ID", MySqlDbType.VarChar).Value = "1";
            cmd.Parameters.Add("@post_author", MySqlDbType.Int32).Value = 1;
            cmd.Parameters.Add("@post_date", MySqlDbType.DateTime).Value = DateTime.Now;
            cmd.Parameters.Add("@post_date_gmt", MySqlDbType.DateTime).Value = DateTime.Now;
            cmd.Parameters.Add("@post_content", MySqlDbType.Text).Value = content;
            cmd.Parameters.Add("@post_title", MySqlDbType.Text).Value = title;
            cmd.Parameters.Add("@post_excerpt", MySqlDbType.VarChar).Value = "";
            cmd.Parameters.Add("@post_status", MySqlDbType.VarChar).Value = "publish";
            cmd.Parameters.Add("@comment_status", MySqlDbType.VarChar).Value = "open";
            cmd.Parameters.Add("@ping_status", MySqlDbType.VarChar).Value = "open";
            cmd.Parameters.Add("@post_password", MySqlDbType.VarChar).Value = "";
            cmd.Parameters.Add("@post_name", MySqlDbType.VarChar).Value = "";

            cmd.Parameters.Add("@to_ping", MySqlDbType.Text).Value = "";
            cmd.Parameters.Add("@pinged", MySqlDbType.Text).Value = "";

            cmd.Parameters.Add("@post_modified", MySqlDbType.DateTime).Value = DateTime.Now;
            cmd.Parameters.Add("@post_modified_gmt", MySqlDbType.DateTime).Value = DateTime.Now;
            cmd.Parameters.Add("@post_content_filtered", MySqlDbType.LongText).Value = "";
            cmd.Parameters.Add("@post_parent", MySqlDbType.Int32).Value = 0;
            cmd.Parameters.Add("@guid", MySqlDbType.VarChar).Value = "";

            cmd.Parameters.Add("@menu_order", MySqlDbType.Int32).Value = 0;
            cmd.Parameters.Add("@post_type", MySqlDbType.VarChar).Value = "post";
            cmd.Parameters.Add("@post_mime_type", MySqlDbType.VarChar).Value = "";
            cmd.Parameters.Add("@comment_count", MySqlDbType.Int32).Value = 0;
            cmd.ExecuteNonQuery();

            cmd.CommandText = "select * from wp_posts order by ID desc LIMIT 1";
            MySqlDataReader dataReader = cmd.ExecuteReader();
            int idcolumn = 0;
            while (dataReader.Read())
            {
                idcolumn = Convert.ToInt32(dataReader["ID"]);
            }
            dataReader.Close();

            cmd.CommandText = "INSERT INTO wp_postmeta (post_id,meta_key,meta_value)" + "VALUES (@post_id,@meta_key,@meta_value)";

            cmd.Parameters.Add("@post_id", MySqlDbType.Int32).Value = idcolumn;
            cmd.Parameters.Add("@meta_key", MySqlDbType.VarChar).Value = "Image";
            cmd.Parameters.Add("@meta_value", MySqlDbType.LongText).Value = image;
            cmd.ExecuteNonQuery();

            cmd.CommandText = "INSERT INTO wp_term_relationships (object_id,term_taxonomy_id,term_order)" + "VALUES (@object_id,@term_taxonomy_id,@term_order)";

            cmd.Parameters.Add("@object_id", MySqlDbType.Int32).Value = idcolumn;
            cmd.Parameters.Add("@term_taxonomy_id", MySqlDbType.Int32).Value = cat;
            cmd.Parameters.Add("@term_order", MySqlDbType.Int32).Value = 0;
            cmd.ExecuteNonQuery();


            textBox4.Text = idcolumn.ToString();

            textBox2.Text = "MySQL version : " + conn.ServerVersion;

        }
        catch (MySqlException ex)
        {
            textBox2.Text = ex.ToString();

        }
        finally
        {
            if (conn != null)
            {
                conn.Close();
            }
        }
    }

这是一个庞大的wordpress数据库

Answer 1

您应该连接到代码之外的数据库。现在你正在进行一次连接 - 每次插入，这是非常低效的。

步骤应该是：

connection to database
while(have data) {
    use connection to insert data
}
disconnect from database

Answer 2

您是否尝试在一个mysql请求中插入多行？

INSERT INTO example
  (example_id, name, value, other_value)
VALUES
  (100, 'Name 1', 'Value 1', 'Other 1'),
  (101, 'Name 2', 'Value 2', 'Other 2'),
  (102, 'Name 3', 'Value 3', 'Other 3'),
  (103, 'Name 4', 'Value 4', 'Other 4');

Answer 3

由于您使用服务器端代码插入查询，您在连接上浪费了太多时间，来回发送数据，因此您需要一个本地的SQL解决方案。

只需创建一个sql文件，其中包含需要插入;分隔的查询，并使用SOURCE语法记录here将其加载到mysql服务器上。这将确保以最快的方式插入这些行，因为您不会浪费任何宝贵的时间在服务器端代码上。

在循环中远程mysql inseting表非常慢

3 个答案: