根据多个列查找重复行

时间:2017-11-14 05:57:34

标签: php mysql doctrine-orm

我在如何解决这个问题上遇到了一些困难。

我正在处理一个相当大的XLSX文件(大约350,000行,40列)。客户端要求我们忽略数据库中已存在的任何行。

我已经完成了这项工作,但忽略检查确实将处理时间增加了大约5个小时。而且我知道必须有一种更有效的方法来实现这一目标。

我正在使用Doctrine。

HOME

我并不感到惊讶,这很慢,但我不确定如何去做。我找到了许多用于查找重复项的线程,但是用于查找表中的所有重复项,而不是查找单个记录是否具有类似条目。

任何帮助都将不胜感激。

0 个答案:

没有答案