Laravel / Eloquent内存泄漏重复检索相同的记录

时间:2013-09-12 22:46:19

标签: laravel laravel-4

我正在尝试编写一个laravel函数,它从一个数据库中获取大量记录(100,000+)并将其放入另一个数据库中。为此,我需要查询我的数据库,看看用户是否已经存在。我反复拨打这段代码:

$users = User::where('id', '=', 2)->first();

然后在那之后发生几百次,我的内存耗尽。所以,我做了一个极简主义的例子,它耗尽了所有可用的内存,它看起来像这样:

<?php

use Illuminate\Console\Command;

class memoryleak extends Command
{
    protected $name = 'command:memoryleak';
    protected $description = 'Demonstrates memory leak.';

    public function fire()
    {
        ini_set("memory_limit","12M");

        for ($i = 0; $i < 100000; $i++)
        {
            var_dump(memory_get_usage());
            $this->external_function();
        }
    }

    function external_function()
    {
        // Next line causes memory leak - comment out to compare to normal behavior
        $users = User::where('id', '=', 2)->first();

        unset($users);
        // User goes out of scope at the end of this function
    }
}

此脚本的输出(由&#39; php artisan命令执行:memoryleak&#39;)看起来像这样:

int(9298696)
int(9299816)
int(9300936)
int(9302048)
int(9303224)
int(9304368)
....
int(10927344)
int(10928432)
int(10929560)
int(10930664)
int(10931752)
int(10932832)
int(10933936)
int(10935072)
int(10936184)
int(10937320)
....
int(12181872)
int(12182992)
int(12184080)
int(12185192)
int(12186312)
int(12187424)
PHP Fatal error:  Allowed memory size of 12582912 bytes exhausted (tried to allocate 89 bytes) in /Volumes/Mac OS/www/test/vendor/laravel/framework/src/Illuminate/Database/Connection.php on line 275

如果我注释掉了&#34; $ users = User :: where(&#39; id&#39;,&#39; =&#39;,2) - &gt; first();& #34;然后内存使用率保持稳定。

有没有人知道为什么这条线会使用这样的内存,或者知道一种更聪明的方法来完成我想做的事情?

感谢您的时间。

2 个答案:

答案 0 :(得分:39)

我重新创建了你的脚本并使用调试器逐步完成它,因为我无法理解会导致这类内存问题的可怕事情。当我走过时,我偶然发现了这个:

// in Illuminate\Database\Connection
$this->queryLog[] = compact('query', 'bindings', 'time');

似乎您在Laravel中运行的每个查询都存储在持久日志中,这解释了每次查询后内存使用量的增加。就在上面,是以下一行:

if ( ! $this->loggingQueries) return;

更多挖掘确定默认情况下loggingQueries属性设置为true,并且可以通过disableQueryLog方法更改,这意味着,如果您调用:

 DB::connection()->disableQueryLog();

在你要执行所有查询之前,你不会看到不断增加的内存使用量;它根据您的示例代码运行我的测试时解决了问题。完成后,如果您不想影响应用程序的其余部分,可以调用

DB::connection()->enableQueryLog();

可重新登录。

答案 1 :(得分:1)

我不能说为什么它不释放记忆。您最好的选择是遵循代码并了解它如何为该代码执行的操作。或者问泰勒。

至于你可以做的其他事情:

缓存查询如果您一遍又一遍地调用同一查询,请使用query cache。就像在查询中添加->remember($time_to_cache)一样简单。

让DBMS完成所有艰苦工作。理想情况下,您只需执行an insert into select statement,但是当您跨越数据库时,这会变得很麻烦。取而代之的是,批量选择和the insert queries,这样您就可以减少对数据库的调用并创建更少的对象。这将更多的繁重工作卸载到数据库管理系统,这在这些类型的任务中可以说更有效。