MyISAM上的FullText INDEXING非常慢

时间:2011-10-03 06:18:52

标签: mysql performance full-text-search indexing full-text-indexing

我有一张桌子

CREATE TABLE `dataFullText` (
`id` int(11) NOT NULL,
`title` char(255) NOT NULL,
`description` text NOT NULL,
`name` char(100) NOT NULL,
`ref` char(50) NOT NULL,
PRIMARY KEY (`id`),
FULLTEXT KEY `fulltext` (`ref`,`name`,`title`,`description`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8

其中有大约10万条记录。

mysql> select * from information_schema.TABLES WHERE TABLE_NAME='jobsFullText'\G
*************************** 1. row ***************************
TABLE_CATALOG: NULL
TABLE_SCHEMA: ****
TABLE_NAME: dataFullText
TABLE_TYPE: BASE TABLE
ENGINE: MyISAM
VERSION: 10
ROW_FORMAT: Dynamic
TABLE_ROWS: 79495
AVG_ROW_LENGTH: 791
DATA_LENGTH: 62938804
MAX_DATA_LENGTH: 281474976710655
INDEX_LENGTH: 53625856
DATA_FREE: 51328
AUTO_INCREMENT: NULL
CREATE_TIME: 2011-10-03 13:38:25
UPDATE_TIME: 2011-10-03 13:55:56
CHECK_TIME: 2011-10-03 13:38:48
TABLE_COLLATION: utf8_general_ci
CHECKSUM: NULL
CREATE_OPTIONS: 
TABLE_COMMENT: 

此表每小时更新一次LOAD DATA INFILE,其中有大约8k条记录。

桌子被锁定的时间大约是30秒。这对应于我制作的时间

mysql> alter table dataFullText drop index title;
Query OK, 79495 rows affected (1.33 sec)
Records: 79495  Duplicates: 0  Warnings: 0

mysql> alter table dataFullText add fulltext index (ref,name,title,description);
Query OK, 79495 rows affected (22.96 sec)
Records: 79495  Duplicates: 0  Warnings: 0

我的问题是30秒真的很长。该表被查询5次/秒,这使得队列达到30 x 5 = 150。因为我们的最大连接限制设置为100,所以mysql服务器开始拒绝一些传入连接。

我们计划将来在此表中至少有一百万行,我想这不会更快。

我有什么办法可以减少mysql用于更新索引的时间吗?

1 个答案:

答案 0 :(得分:0)

在一般的SQL DBMS中,完全索引这样的表并没有帮助你。索引实际上比表本身大,访问它所需的时间甚至比没有索引时访问表的时间还要大。

现在,这实际上取决于您所拥有的特定安装:RAM的数量,系统的整体速度。 在添加索引之前,是的,更新/重新创建索引的速度很慢,只要确保它在你所处的特定条件下是值得的。