Question

我几乎有成千上万的数据要显示给我的报告，这使我的浏览器由于数据量过大而滞后。我认为我的查询是真正的问题。如何优化查询？我应该在查询中添加一些内容吗？

我正在使用支持 PHP7 的 Xampp 。

 SELECT 
`payroll_billed_units`.`allotment_code`,
`payroll_billed_units`.`category_name`,
`payroll_billed_units`.`ntp_number`,
`payroll_billed_units`.`activity`,
`payroll_billed_units`.`regular_labor`,
`payroll_sub`.`block_number`,
(SELECT 
    GROUP_CONCAT(DISTINCT `lot_number` SEPARATOR ', ')
    FROM
        `payroll_billed_units` `lot_numbers`
    WHERE
        `lot_numbers`.`allotment_code` =  `payroll_billed_units`.`allotment_code`
            AND `lot_numbers`.`category_name` = `payroll_billed_units`.`category_name`
            AND `lot_numbers`.`ntp_number` = `payroll_billed_units`.`ntp_number`
            AND `lot_numbers`.`activity` = `payroll_billed_units`.`activity`) AS `lot_numbers`,
(SELECT 
        COUNT(`billed`.`ntp_id`)
    FROM
        `regular_ntp` `billed`
    WHERE
        `billed`.`allotment_code` = `payroll_billed_units`.`allotment_code`
            AND `billed`.`category_name` = `payroll_billed_units`.`category_name`
            AND `billed`.`ntp_number` = `payroll_billed_units`.`ntp_number`
            AND `billed`.`activity` = `payroll_billed_units`.`activity`) AS `billed`,
(SELECT 
        COUNT(`approved`.`id`)
    FROM
        `payroll_billed_units` `approved`
    WHERE
        `approved`.`allotment_code` = `payroll_billed_units`.`allotment_code`
            AND `approved`.`category_name` = `payroll_billed_units`.`category_name`
            AND `approved`.`ntp_number` = `payroll_billed_units`.`ntp_number`
            AND `approved`.`activity` = `payroll_billed_units`.`activity`) AS `approved`
 FROM
`payroll_billed_units` 
 JOIN payroll_transaction ON payroll_billed_units.billing_number = 
payroll_transaction.billing_number 
 JOIN payroll_sub ON payroll_transaction.billing_number = 
payroll_sub.billing_number 
WHERE payroll_billed_units.billing_date = '2019-02-13' 
AND payroll_transaction.contractor_name = 'Roy Codal' GROUP BY allotment_code, category_name, activity

我期望它会加载或显示我的所有数据。

Answer 1

最大的问题是dependendt子选择，它们会导致性能不佳。将为外部查询的每行执行一次子选择。而且，如果您级联sub-selects，您将很快永久运行查询。

如果任何部分仅产生5个结果集，则3个子选择将意味着数据库必须运行625个查询（5 ^ 4）！

使用联接。

Answer 2

您的几个表都需要此“复合”索引：

INDEX(allotment_code, category_name, ntp_number, activity)  -- in any order

payroll_transaction需要INDEX(contractor_name)，尽管可能无法使用。

payroll_billed_units需要INDEX(billing_date)，尽管可能无法使用。

为进一步讨论，请为每个表提供SHOW CREATE TABLE，并为EXPLAIN SELECT ...

仅使用COUNT(*)而不是COUNT(foo)。后者在包括该列之前检查该列是否为非NULL。通常不需要。读者以为可能为NULL感到困惑。

您的GROUP BY不正确，因为它缺少ntp_number。阅读有关sql_mode中的ONLY_FULL_GROUP_BY的信息。之所以提出这一点，是因为您几乎可以摆脱其中的一些子查询。

另一个问题...由于JOIN与GROUP BY具有“膨胀-放气”的性质，因此数字可能会膨胀。我建议您手动检查COUNTs的值。

如何优化显示数千个数据的长查询

2 个答案: