Question

以下查询需要很长时间才能执行大约2分钟，请帮助我如何提高此查询的效果。
所以我们的要求是在2到3秒内得到结果。
查询也在使用索引。
但它正在执行更多扫描。

查询：

select max(`log_date`)
from `top_competitor_summary_entity`
where
  own_domain_id = 4
  and keyword_top1_count > 0
  and (grouptag_id = 0 OR grouptag_id is null);

Expalin计划：

+----+-------------+-------------------------------+------+--------------------------------------+------------------------+---------+-------+---------+-------------+
| id | select_type | table                         | type | possible_keys                        | key                    | key_len | ref   | rows    | Extra       |
+----+-------------+-------------------------------+------+--------------------------------------+------------------------+---------+-------+---------+-------------+
|  1 | SIMPLE      | top_competitor_summary_entity | ref  | own_domain_id,own_domain_id_log_date | own_domain_id_log_date | 4       | const | 2100128 | Using where |
+----+-------------+-------------------------------+------+--------------------------------------+------------------------+---------+-------+---------+-------------+
1 row in set (0.66 sec)

表格结构：

mysql> show create table top_competitor_summary_entity\G
*************************** 1. row ***************************
       Table: top_competitor_summary_entity
Create Table: CREATE TABLE `top_competitor_summary_entity` (
  `id` bigint(20) unsigned NOT NULL AUTO_INCREMENT,
  `domain` varchar(255) NOT NULL COMMENT 'competitor domain name',
  `own_domain_id` int(11) NOT NULL,
  `keyword_top10_count` int(11) DEFAULT NULL,
  `keyword_top3_count` int(11) DEFAULT NULL,
  `keyword_top1_count` int(11) DEFAULT NULL,
  `keyword_top10_search_volume` bigint(20) DEFAULT NULL,
  `keyword_top3_search_volume` bigint(20) DEFAULT NULL,
  `keyword_top1_search_volume` bigint(20) DEFAULT NULL,
  `url_top10_count` int(11) DEFAULT NULL
    COMMENT 'how many competitor url in Top 10',
  `log_date` date DEFAULT NULL,
  `grouptag_id` int(11) DEFAULT '0',
  `keyword_top10_count_bing` int(11) DEFAULT '0',
  `keyword_top10_count_yahoo` int(11) DEFAULT '0',
  `keyword_top3_count_bing` int(11) DEFAULT '0',
  `keyword_top3_count_yahoo` int(11) DEFAULT '0',
  `keyword_top1_count_bing` int(11) DEFAULT '0',
  `keyword_top1_count_yahoo` int(11) DEFAULT '0',
  PRIMARY KEY (`id`),
  KEY `own_domain_id` (`own_domain_id`),
  KEY `domain_own_domain_id_log_date` (`domain`,`own_domain_id`,`log_date`),
  KEY `own_domain_id_log_date` (`own_domain_id`,`log_date`)
) ENGINE=InnoDB AUTO_INCREMENT=680592051 DEFAULT CHARSET=utf8
1 row in set (0.09 sec)

Answer 1

正如 Brandon Moore 所说

查询本身非常简单，我认为你不可能通过修改它来使它更快。

你仍然可以尝试这个并检查它是否有所不同

select `log_date`
from `top_competitor_summary_entity`
where
  own_domain_id = 4
  and keyword_top1_count > 0
  and (grouptag_id = 0 OR grouptag_id is null)
Order by log_date
LIMIT 0,1;

Answer 2

查询本身非常简单，我不认为你可以做任何事情来通过修改它来加快速度。我仍然会好奇使用“IsNull（grouptag_id，0）= 0”是否会产生任何不同。我对此表示怀疑，但看看它是否会刮掉任何东西可能会很有趣。

我认为真正的问题是，有很多记录的own_domain_id值为4，而且你没有where子句中其他字段的索引。您可以为它们创建单独的索引和/或如果要创建专门为此查询定制的索引，则创建一个在所引用的所有4个字段上键入的索引。

其他一些观察结果：

如果可以更改代码以处理空值（可能只是将它们视为0），那么您可以摆脱大多数这些字段中的默认值，并将它们设为null。如果没有多少字段实际上具有值0，那么这不会做太多，但是如果将很多字段设置为0，则会导致表占用更少的磁盘空间，这将转化为扫描时间更短的时间表

您还可以水平或垂直分区表格。

水平：你可以把所有的TOP1领域，并把它们放在一个TOP1表，所有的TOP3领域，并把它们放在一个TOP3表等。或者，你可以做一个表中的所有雅虎和其他所有的兵表;或者可能是一个表中的所有计数字段和另一个表中的所有计数字段。如果您发现自己通常一次只需要一组字段，那么这会缩短搜索时间，但如果您通常最终会在大多数查询中抓取所有字段，那么它当然不会真正有用。

垂直：这个可能比它的价值要多得多，但你可以将表中的记录分成多个表并将它们放在多个硬盘上，并同时异步查询它们。我一直想知道Google是否在这些方面做了些什么。

我还注意到你正在为你的id使用bigint，这是8个字节，而不是只有4个字节的int。如果您认为在某些时候您将真实地处理数十亿条记录，那么bigint显然是要走的路，但是否则您可以将数据库缩小大约100兆字节，这也会使您的搜索速度稍快一些。并且没有理由你现在不能把它变成一个int并且如果有必要的话将它改回bigint。

太多时间执行

2 个答案: