MySQL LOAD DATA LOCAL INFILE仅导入一行

时间:2013-01-30 21:52:16

标签: mysql sql csv import phpmyadmin

我们有一个包含数千条记录的CSV文件。我想通过phpmyadmin将这些行导入MySQL表。这是使用的命令:

load data local infile '/var/www/html/deansgrads_201280.csv' 
into table ttu_nameslist
fields terminated by ','
enclosed by '"'
lines terminated by '\r\n'
(firstname, middlename, lastname, city, county, state, termcode, category)

表中有一个ID字段设置为自动递增。当我们执行此SQL时,只将第一行导入表中。

输入数据文件行:

"Aaron","Al","Brockery","Cookeville","Putnam","TN","201280","deanslist"
"Aaron","Dan","Mickel","Lebanon","Wilson","TN","201280","deanslist"

表格结构:

CREATE TABLE `ttu_nameslist` (
  `id` int(11) NOT NULL,
  `firstname` varchar(50) NOT NULL,
  `middlename` varchar(50) NOT NULL,
  `lastname` varchar(50) NOT NULL,
  `city` varchar(50) NOT NULL,
  `county` varchar(50) NOT NULL,
  `state` varchar(2) NOT NULL,
  `termcode` varchar(6) NOT NULL,
  `category` varchar(10) NOT NULL,
  PRIMARY KEY (`id`)
 ) ENGINE=MyISAM DEFAULT CHARSET=latin1

我做错了为什么在添加一行后退出了?

4 个答案:

答案 0 :(得分:7)

您说ID字段具有AUTO_INCREMENT属性,但CREATE TABLE语句中没有提及它。这是问题的一部分。

另一部分是那些截断警告。 CSV文件中的某些行可能包含太长而无法放入列中的数据。将这些文本列的大小增加到更大的值(假设为200),然后重试。

您完全确定CSV文件有效吗? (a.k.a.每行具有相同数量的值等)。您应该检查这些字符串是否包含逗号(,),尽管这不应该是一个问题。

答案 1 :(得分:5)

为什么MySQL LOAD DATA INFILE命令只加载一行?

正在发生的事情是你加载第一列是好的,然后当你加载第二列时它失败因为违反了一个唯一的索引约束。

MySQL LOAD DATA LOCAL INFILE将在列上强制执行您的唯一索引,然后跳过任何有问题的重复行而不对其执行任何操作,甚至不记录警告!

如何重现这个phenemenon:

  1. 创建一个包含int和varchar列的表:

    mysql> create table foo(id INT, mytext VARCHAR(255));
    Query OK, 0 rows affected (0.02 sec)
    
  2. 在varchar列上添加唯一约束:

    mysql> alter table foo add constraint my_epic_constraint unique(mytext);
    Query OK, 0 rows affected (0.02 sec)
    Records: 0  Duplicates: 0  Warnings: 0
    
  3. 创建输入文本文件/tmp/foo.txt,由制表符分隔,违反了唯一约束:

    1   fred
    2   fred
    
  4. 尝试导入它:

    mysql> load data local infile '/tmp/foo.txt' into table foo fields 
           terminated by '\t' lines terminated by '\n' (@col1,@col2) 
           set id=@col1, mytext=@col2;
    
    Query OK, 1 row affected (0.01 sec)
    Records: 2  Deleted: 0  Skipped: 1  Warnings: 0
    
  5. BAM!这是你的问题:为什么它只导入一行?因为你有一个唯一的密钥约束,数据文件中的行违反了它。

    <强>解决方案:

    1. 删除表格上的唯一键约束,然后重试。

    2. 进入文本文件并删除违反唯一约束的重复行。

答案 2 :(得分:3)

我有同样的问题,我解决了使用doble引号 “\ r \ n”而不是“\ r \ n”

答案 3 :(得分:1)

对于那些感兴趣的人,我遇到了与上述相同的问题,但与LINES TERMINATED BY分配,主键冲突或错误的字符集无关。

升级到MySQL 8后,我开始出现此错误,我的问题最终是通过 col_name_or_user_var 选项发送的列名。最初,我没有使用导入文件中的多余列,这与原始实现没有任何关系。但是,升级后,我必须为这些列添加变量条目,以使其正常工作并导入多行(我无权在import.csv中更改这些列)。 使用这样的导入文件:

FIELD_1, FIELD_2, FIELD_3, FIELD_4, FIELD_5

我必须从:

LOAD DATA INFILE 'import.csv'
INTO TABLE tableName
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '\"'
LINES TERMINATED BY '\n'
(FIELD_1, FIELD_2, FIELD_3)

收件人:

LOAD DATA INFILE 'import.csv'
INTO TABLE tableName
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '\"'
LINES TERMINATED BY '\n'
(FIELD_1, FIELD_2, FIELD_3, @FIELD_4, @FIELD_5)