Question

我无法弄清楚这一点。我有一个包含174638行的CSV。这是一个示例：

015826136@domain.com,2010-11-08 14:10:35
01DETAIL@domain.com,2011-11-01 20:14:21
01krisp10@domain.com,2010-11-08 15:00:09
01luis@domain.com,2010-11-08 15:00:09
01tthomas@domain.com,2010-11-08 15:09:13
02570734@domain.com,2011-10-10 11:44:54
02arman02@domain.com,2010-11-08 14:53:26
03091980@domain.com,2010-11-08 14:45:09
03331025@domain.com.com,2010-11-08 14:45:09

我不需要或使用第二列（日期），只需要第一列（电子邮件）。

我正在读取CSV并循环遍历行，并将电子邮件地址插入数据库表。当我运行另一个文件，我已经保存了4000个相同的记录，它运行正常。当我运行完整的一行时，每行插入两次。所有这些，然后再次全部。当然php页面也会超时。如果我注释掉插入并回显每封电子邮件，它们只会在屏幕上回显一次。

这是PHP代码：

if ( isset($_POST["step"]) && $_POST["step"] == '2' ) {

    if ( isset($_FILES["file"])) {

            if ($_FILES["file"]["error"] == 0) {
                $name = $_FILES['file']['name'];
                $ext = strtolower(end(explode('.', $_FILES['file']['name'])));
                $type = $_FILES['file']['type'];
                $tmpName = $_FILES['file']['tmp_name'];

                // check the file is a csv
                if($ext === 'csv'){
                    if(($handle = fopen($tmpName, 'r')) !== FALSE) {

                        $field = $_POST['field'];
                        //clear the import table
                        mysql_query("TRUNCATE table iContact_import");

                        //loop through the CSV
                        while(($data = fgetcsv($handle, 300, ',')) !== FALSE) {
                            //$info = explode(",", $line);
                            //echo $info[0].'<br/>';
                            mysql_query("INSERT iContact_import (email,field) values ('".$data[0]."','".$field."')");                                   
                        }

                        echo '<h3 style="color:green;">Database is prepped for new subscribers</h3>';
                        echo '<p><a href="icontact_process.php?step=3">Click here to update subscriptions</a></p>';

                    }

                } else {
                    echo '<p>File is not a CSV. Please use another field with CSV values and extension.</p>';
                }

            } else {
                echo "Error: " . $_FILES["file"]["error"] . "<br />";
            }

    } else {
        echo '<p>Please upload a CSV file with email addresses to import.</p>';
    }
}

Answer 1

您正在遇到欺骗行，因为您没有跟踪已输入数据库的内容。如果您想确保不会发生这种情况，您可以在数据库的电子邮件列中添加唯一键，这样可以确保只添加唯一的电子邮件地址。

但是，您必须添加某种错误处理，否则您的脚本会在尝试插入欺骗时停止。

ALTER TABLE `my_table` ADD UNIQUE KEY (`email`);

Answer 2

但是，否则您将不得不添加某种错误处理您的脚本在尝试插入欺骗时将暂停。

如果您使用的是MySQL5，则可以使用INSERT IGNORE

Answer 3

您还可以使用带有IGNORE选项的LOAD DATA INFILE。它将帮助您使用一个MySQL命令从CSV文件加载数据并忽略重复项;你只应该使email字段为UNIQUE（就像Digital Precision建议的那样）。

另一种方法是将数据加载到第二个（或临时表）中，然后使用INSERT ... SELECT语句将数据复制到第一个表。

Answer 4

我猜它运行了两次，因为 http 连接和输出缓冲区问题。如果您的请求运行时间过长（超过 10 分钟）而无法完成，那么您的浏览器会向您的服务器发送相同的请求。现代浏览器的行为就是这样。所以我想这是你的问题...

尽量把这些放在你的代码之上；

ob_end_clean();
header("Connection: close\r\n");
header("Content-Encoding: none\r\n");
ignore_user_abort(true); // optional
ob_start();
echo ('Process running...');
$size = ob_get_length();
header("Content-Length: $size");
ob_end_flush();     // Strange behaviour, will not work
flush();            // Unless both are called !
ob_end_clean();

//PUT YOUR CODES HERE

此代码在请求后关闭 http 连接。所以你的代码只安全运行一次。

为什么我的数据会被插入两次？ PHP / MySQL的

4 个答案: