Question

可能重复：
Bulk Insert of hundreds of millions of records

所以我只是想知道是否有可能使用INSERT INTO，比如一个700k行外部ascii文件到已经创建的表中并且其中包含现有数据？ Al值是相同的，只是我的一位同事告诉我使用该命令而不是COPY。这个评论是假的吗？

提前致谢。

PS：我正在使用PosgtreSQL / PGAdmin III

Answer 1

您还可以使用外部数据包装器将文本文件映射为表格：

两个例子：

将文本文件映射到表后，可以执行

INSERT INTO target_table (col1, col2, col3)
SELECT col1, col2, col3 
FROM fdw_table;

Answer 2

从技术上讲，如果您的文件格式正确如下：

(f1, f2, f3, f4),

您可以简单地添加前缀：

INSERT INTO tbs(f1, f2, f3, f4) VALUES

在文件的开头用;终止所有内容并尝试将其作为单个SQL命令运行。问题是有700k行我甚至都不知道PostgreSQL是否能够解析这么长的语句。我的钱是它不会，但欢迎你尝试。有关更多文档，请参阅this page。

现在，如果您不想使用COPY，那么我会考虑编写一个简单的Perl或Python脚本来执行以下操作：

while(<FILE>)
{
    chomp;
    @data_fields = split(/<delim>/, $_);
    $sth->execute(@data_fields);
}

其中$sth是针对数据库准备的INSERT语句。