PHP PDO缓冲查询问题

时间:2009-02-23 18:06:36

标签: php mysql pdo

我遇到了PHP数据对象功能的一些严重问题。我试图使用缓冲查询循环一个相当大的结果集(~60k行,~1gig),以避免获取整个集合。

无论我做什么,脚本都挂在PDO :: query()上 - 似乎查询运行无缓冲(为什么结果集大小的变化'修复'问题呢?)。这是我重现问题的代码:

<?php
$Database = new PDO(
    'mysql:host=localhost;port=3306;dbname=mydatabase',
    'root',
    '',
    array(
        PDO::ATTR_ERRMODE => PDO::ERRMODE_EXCEPTION,
        PDO::MYSQL_ATTR_USE_BUFFERED_QUERY => true
    )
);

$rQuery = $Database->query('SELECT id FROM mytable');

// This is never reached because the result set is too large
echo 'Made it through.';

foreach($rQuery as $aRow) {
    print_r($aRow);
}
?>

如果我用一些合理的数字限制查询,它可以正常工作:

$rQuery = $Database->query('SELECT id FROM mytable LIMIT 10');

我尝试过使用PDO :: MYSQL_ATTR_MAX_BUFFER_SIZE并使用PDO :: prepare()和PDO :: execute()(虽然上面的查询中没有参数),两者都无济于事。任何帮助将不胜感激。

3 个答案:

答案 0 :(得分:8)

如果我理解这一点,缓冲查询涉及告诉PHP您要在开始处理之前等待整个结果集。在PDO之前,这是默认设置,如果您想立即处理结果,则必须致电mysql_unbuffered_query

为什么在PDO MySQL驱动程序页面上没有解释这一点,我不知道。

答案 1 :(得分:1)

您可以尝试将其拆分为不足以导致问题的块:

<?php    
$id = 0;
$rQuery = $Database->query('SELECT id FROM mytable ORDER BY id ASC LIMIT 100');

do {
    stuff($rQuery);
    $id += 100;
} while ( $rQuery = $Database->query(
            'SELECT id FROM mytable ORDER BY id ASC LIMIT 100 OFFSET '.$id
          )
        );
?>

......无论如何,你明白了。

答案 2 :(得分:-1)

或许您可以尝试使用mysql函数:

while ($row = mysql_fetch_row($query)) {
...
}

这肯定会更快,因为该foreach语句给每次使用fetchAll()代替fetch()的印象