Question

我正在开发应用程序，我需要通过csv文件上传数据，然后将记录保存到mysql表中。我在php中这样做。直到现在我有了这个代码。

 <?php
 //date_default_timezone_set("Asia/Karachi");
//echo "The time is " . date("Y-m-d h:i:sa");
$DateTime=date("Y-m-d h:i:sa");
 $FilePath=$_POST['img'];
 $ID=$_POST['ID'];
 $Query_String2="";
// echo $FilePath;
 $row = 1;
 if(isset($FilePath))
 {
    // echo "ID is =".$ID;
       $Query_String1 = "INSERT into ap_form_$ID VALUES";

        if (($handle = fopen($FilePath, "r")) !== FALSE)
         {
            while (($data = fgetcsv($handle, 1000, ",")) !== FALSE) 
            {
                if($row!=1)
                $Query_String2=$Query_String2.",";
                $Query_String2= $Query_String2."("."NULL".","."'".$DateTime."'".","."NULL".","."'127.0.0.1'".","."1".","."NULL";
                $num = count($data);
                $row++;
                $master = array();
                for ($c=0; $c < $num; $c++) 
                {

                    if($c==0)
                        $Query_String2=$Query_String2.","."'".$data[$c]."'";
                    else
                        $Query_String2=$Query_String2.","."'".$data[$c]."'";
                //$master[$c]= $data[$c];
                 }
                       $Query_String2=$Query_String2.")";


                  }

                  $Final_Query=$Query_String1.$Query_String2;
                  echo "Final Query =".$Final_Query;
                $connection = mysqli_connect("localhost", "root","","form_db");

                $result = mysqli_query($connection,$Final_Query) or mysql_error();

                if($result > 0)
                {
                    echo "
                    <script type=\"text/javascript\">
                     alert('Record has been inserted into the form');
                    </script>
                ";
                }
                        else
                {
                        echo "
                    <script type=\"text/javascript\">
                     alert('I am sorry there is some problem');
                    </script>
                ";

                }
    fclose($handle);

我在这段代码中做的是，我从CSV文件中读取数据，然后创建一个长的查询字符串，如＆＃34;插入表值（＆＃34; bla，bla，bal），（＆＃34 ; bla，bla，bla）＆＃34; 这个代码适用于小数据，就像我在csv文件中有数据高达1000但当数据超过1000时，进程卡住了，我无法在mysql中保存数据。在我的应用程序中我需要上传至少50000。任何想法或解决方案来解决这个问题。

Answer 1

如果您在运行MySQL的同一服务器上有CSV文件，您还可以使用LOAD DATA INFILE将CSV文件直接加载到数据库中，例如

LOAD DATA INFILE 'yourfile.csv' 
 INTO TABLE yourtable
 FIELDS TERMINATED BY ',';

有关详细信息，请参阅LOAD DATA INFILE的MySQL参考手册。

修改

您可以启用LOAD DATA LOCAL以允许将来自Web服务器的CSV文件加载到数据库中，但需要考虑安全因素。同样，reference manual还有更多细节：

支持LOCAL版本的LOAD DATA语句有两个潜在的安全问题：

MySQL服务器启动从客户端主机到服务器主机的文件传输。理论上，可以构建修补的服务器，该服务器将告诉客户端程序传输服务器选择的文件而不是LOAD DATA语句中客户端指定的文件。这样的服务器可以访问客户端用户具有读访问权限的客户端主机上的任何文件。

在客户端从Web服务器连接的Web环境中，用户可以使用LOAD DATA LOCAL读取Web服务器进程具有读访问权限的任何文件（假设用户可以对SQL服务器运行任何命令））。在此环境中，与MySQL服务器相关的客户端实际上是Web服务器，而不是由连接到Web服务器的用户运行的远程程序。

要在服务器端启用此功能，请执行以下操作：

SET GLOBAL local_infile=ON;

之后你可以验证这一点：

> SHOW GLOBAL VARIABLES like "%local%";
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| local_infile  | ON    |
+---------------+-------+
1 row in set (0.00 sec)

您还需要在php.ini：

中启用此功能

[MySQL]
; Allow accessing, from PHP's perspective, local files with LOAD DATA statements
; http://php.net/mysql.allow_local_infile
mysql.allow_local_infile = On

启用LOAD DATA LOCAL后，您可以将Web服务器中的加载CSV文件直接用于数据库：

LOAD DATA LOCAL INFILE 'yourfile.csv' 
 INTO TABLE yourtable
 FIELDS TERMINATED BY ',';

如果您需要在加载数据时修改数据，可以先将其存储在本地变量中，然后在插入数据库时进行修改，例如：

LOAD DATA LOCAL INFILE 'yourfile.csv' 
 INTO TABLE yourtable
 FIELDS TERMINATED BY ','
 (@c1,@c2)
 SET column1=NULL, column2=SUBSTRING(@c2,2,3), column3='127.0.0.1';

在php中从CSV文件中将数据插入mysql

1 个答案: