Greenplum COPY不会过滤重复的条目

时间:2011-08-04 01:51:51

标签: copy primary-key greenplum

使用COPY命令将内容加载到绿色梅花表时出现问题。我所拥有的是三列表让我们说A,B,C和表不应该重复元素。所以我已经制作了一个复合键,以上三个

PRIMARY KEY ( A , B , C )

但是我用来加载表的输入文件有重复的条目。我想要的是,COPY命令过滤掉重复的元素并继续加载数据。但就我而言,只要COPY遇到重复条目,它就会中止加载。有关如何进行的任何线索?

由于

Ganesh.R

1 个答案:

答案 0 :(得分:1)

COPY不起作用。

我要尝试的第一件事是系统排序。

sort -u old_filename > new_filename

'-u'参数告诉sort只输出唯一的行。