我遇到了PHP数据对象功能的一些严重问题。我试图使用缓冲查询循环一个相当大的结果集(~60k行,~1gig),以避免获取整个集合。
无论我做什么,脚本都挂在PDO :: query()上 - 似乎查询运行无缓冲(为什么结果集大小的变化'修复'问题呢?)。这是我重现问题的代码:
<?php
$Database = new PDO(
'mysql:host=localhost;port=3306;dbname=mydatabase',
'root',
'',
array(
PDO::ATTR_ERRMODE => PDO::ERRMODE_EXCEPTION,
PDO::MYSQL_ATTR_USE_BUFFERED_QUERY => true
)
);
$rQuery = $Database->query('SELECT id FROM mytable');
// This is never reached because the result set is too large
echo 'Made it through.';
foreach($rQuery as $aRow) {
print_r($aRow);
}
?>
如果我用一些合理的数字限制查询,它可以正常工作:
$rQuery = $Database->query('SELECT id FROM mytable LIMIT 10');
我尝试过使用PDO :: MYSQL_ATTR_MAX_BUFFER_SIZE并使用PDO :: prepare()和PDO :: execute()(虽然上面的查询中没有参数),两者都无济于事。任何帮助将不胜感激。
答案 0 :(得分:8)
如果我理解这一点,缓冲查询涉及告诉PHP您要在开始处理之前等待整个结果集。在PDO之前,这是默认设置,如果您想立即处理结果,则必须致电mysql_unbuffered_query
。
为什么在PDO MySQL驱动程序页面上没有解释这一点,我不知道。
答案 1 :(得分:1)
您可以尝试将其拆分为不足以导致问题的块:
<?php
$id = 0;
$rQuery = $Database->query('SELECT id FROM mytable ORDER BY id ASC LIMIT 100');
do {
stuff($rQuery);
$id += 100;
} while ( $rQuery = $Database->query(
'SELECT id FROM mytable ORDER BY id ASC LIMIT 100 OFFSET '.$id
)
);
?>
......无论如何,你明白了。
答案 2 :(得分:-1)
或许您可以尝试使用mysql函数:
while ($row = mysql_fetch_row($query)) {
...
}
这肯定会更快,因为该foreach语句给每次使用fetchAll()
代替fetch()
的印象