数据库挑战:如何有效地更新100万条记录?

时间:2014-06-05 15:44:27

标签: mysql sql database sql-update

我正在努力更新我的海量数据库,但由于这次大规模的更新/比较,我的wamp / Heidisql一直在崩溃。

我有两个数据库表:主表" member_all" (包含300万条记录)和子表:" mobile_results" (包含9,000条记录)。表的数据库结构如下所示:

主表(" member_all")

id int(11),
name varchar(255),
phoneWork varchar(255),
phoneMobile  varchar(255),
phoneMobileNetwork varchar(255)

表格中的数据 如下所示:

id name      phoneWork      phoneMobile   phoneMobileNetwork 
1  bill      061090999990   0789867676    Null
3  billsaasa 06109094399990 076689867676  Null

子表:(" mobile_results")

id int(11) autoincrement,
phoneMobile varchar(255),
phoneMobileNetwork  varchar(255)

mobile_results中的数据如下所示:

id     phoneMobile  phoneMobileNetwork
8789   0789867676   Orange     
238789 076689867676 O2

9,000手机号码的所有移动网络数据都存储在" mobile_results"但是当我尝试比较这两个表时,我卡住了,我的wamp / Heidi sql崩溃了?

我的问题是:

我如何填充" member_all"与" phoneMobileNetwork"来自" mobile_results"的值有效?

以下是我尝试的查询:

查询1

我使用限制来划分我的查询。这很慢,并且还需要1周的时间来比较来自mobile_results的9,000条记录。

update  member_all,mobile_results 
set member_all.phoneMobileNetwork=mobile_results.phoneMobileNetwork  
where member_all.phoneMobile in  
(SELECT phoneMobile FROM mobile_results limit 1,10);

查询2

update  member_all,mobile_results 
set member_all.phoneMobileNetwork=mobile_results.phoneMobileNetwork  
where member_all.phoneMobile in  
(SELECT phoneMobile FROM mobile_results where id <10);

同样不适合大量记录。

请帮助我如何更新记录我的&#34; member_all&#34;高效地一桌一桌。

我很感谢你在这方面的帮助。

2 个答案:

答案 0 :(得分:1)

你能尝试一下。我认为使用Exist会更快

update  member_all
set phoneMobileNetwork=
(select phoneMobileNetwork  from mobile_results where 
member_all.phoneMobile=mobile_results.phoneMobile)
WHERE EXISTS
(
select 1 from mobile_results where 
member_all.phoneMobile=mobile_results.phoneMobile);

答案 1 :(得分:0)

您可以尝试在更新时加入表格。没有EXISTS,没有IN。像这样:

update member_all AS ma
  JOIN mobile_results ms on ma.phoneMobile=ms.phoneMobile
  SET member_all.phoneMobileNetwork=mobile_results.phoneMobileNetwork

参考: