据我所知,pg_bulkload
是postgres
中将大数据批量处理到数据库中的最快方式(如果我错了,请更正我)。
我想处理从CSV
格式到DB的几十千兆字节。 csv文件中的每一行都代表一个DB条目。
重要的是我必须转换并忽略csv文件的某些值,例如:
CSV:
date,stuff,nr
24/4/15,asdasd,1PERS/1PERS
应该导致:
2015-04-24,1/1
(" date"转换,"东西"忽略," nr"最小化)
pg_bulkload
可以吗?如果是,你可以在我的例子中给出转换函数吗?