mysql可以将csv或其他txt文件导入一列吗?

时间:2013-09-01 00:28:48

标签: mysql sql parsing csv

在mysql中我们可以导入数据文件 -

load data infile 'file.txt'
into table `text`
fields terminated ' '
lines terminated '\n'

我的问题是我们可以将包含未知列的文件全部导入一列吗?或者我们可以创建我们需要的列吗?

1 个答案:

答案 0 :(得分:1)

  

我们可以将包含未知列的文件全部导入一列吗?

是的,您可以执行以下几个步骤:

首先创建一个临时登台表(让我们称之为import),其中一列将行保存为源数据文件的行

CREATE TABLE `import` (
  `line` varchar(512) DEFAULT NULL
);

并将文件中的数据加载到表中

LOAD DATA INFILE '/path/to/your/file.txt'
INTO TABLE import
FIELDS TERMINATED BY '\n'
LINES  TERMINATED BY '\n'

第二次假设您有一个类似于此的目标表(让我们称之为words

CREATE TABLE `words` (
  `word` varchar(64) DEFAULT NULL
);

我们可以将每一行拆分为单词并将其插入带有查询的words表中

INSERT INTO words (word)
SELECT SUBSTRING_INDEX(SUBSTRING_INDEX(line, ' ', n.n), ' ', -1) word
  FROM import CROSS JOIN 
(
   SELECT a.N + b.N * 10 + 1 n
     FROM 
    (SELECT 0 AS N UNION ALL SELECT 1 UNION ALL SELECT 2 UNION ALL SELECT 3 UNION ALL SELECT 4 UNION ALL SELECT 5 UNION ALL SELECT 6 UNION ALL SELECT 7 UNION ALL SELECT 8 UNION ALL SELECT 9) a
   ,(SELECT 0 AS N UNION ALL SELECT 1 UNION ALL SELECT 2 UNION ALL SELECT 3 UNION ALL SELECT 4 UNION ALL SELECT 5 UNION ALL SELECT 6 UNION ALL SELECT 7 UNION ALL SELECT 8 UNION ALL SELECT 9) b
    ORDER BY n
) n
 WHERE n.n <= 1 + (LENGTH(line) - LENGTH(REPLACE(line, ' ', '')))
 ORDER BY n.n

注意:

  • 假设你的单词与一个空格完全分开
  • 此查询最多可拆分为100个单词。如果您需要更多或更少,您可以通过编辑内部子查询来调整限制,或者如果定期导入,则考虑使用持久的计数(数字)表。

第三次删除或截断(如果您将再次使用它来导入更多文件)登台表

DROP TABLE import;

这是显示第二步的 SQLFiddle 演示。