while循环中的php性能问题

时间:2015-10-21 20:11:25

标签: php performance while-loop

我使用PHP来进行纬度/经度点以生成JS并在OSM Map上显示点。当我在录音中有10分钟或更长时间的暂停时,我想在地图上制作一首新曲目。

我的数据集目前在大约10个不同的轨道上有大约30000条记录(一些轨道有大约300个点,其他轨道有数千个)。

我遇到了PHP的性能问题。当循环聚集了数百个点时,数据处理速度很快,但如果轨道有数千个点,则性能会急剧下降。

以下是每个曲目的每个点所需的时间

+-----------------+------------------------------+
| Points On Track | Time To Proceed 10000 Points |
+-----------------+------------------------------+
|              21 | 0.75                         |
|           18865 | 14.52                        |
|             539 | 0.79                         |
|             395 | 0.71                         |
|             827 | 0.79                         |
|             400 | 0.74                         |
|             674 | 0.78                         |
|            2060 | 1.01                         |
|            2056 | 0.99                         |
|             477 | 0.73                         |
|             628 | 0.77                         |
|             472 | 0.73                         |
+-----------------+------------------------------+

我们可以看到,当我在赛道上有很多分数时,表现会急剧下降。在这种特殊情况下,处理所有点需要大约30个秒。如果我将每个曲目的分数限制为500分,那么表现相当不错(我的数据集大约需要2.5秒)。

我将Synology DS415play用作网络服务器。

这是我的代码:

$dataTab = array();
if ($result = $mysqli->query($sql)) 
    {   
        $count = 0;

        $row = $result->fetch_array();
        $data = $dataTab[$tabPrt] . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
        $date = new DateTime($row['time']);         

        while($row = $result->fetch_array())
        {
            $count++;

            $newDate = new DateTime($row['time']);
            if(($newDate->getTimestamp() - $date->getTimestamp()) > 600)
            {
                array_push($dataTab, $data);
                $data= "";
                $count = 0;
            }

            $data = $data . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
            $date = $newDate;
        }
        array_push($dataTab, $data);
    }

如果我将每首曲目限制为500分,表现相当不错

$dataTab = array();
    if ($result = $mysqli->query($sql)) 
        {   
            $count = 0;

            $row = $result->fetch_array();
            $data = $dataTab[$tabPrt] . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
            $date = new DateTime($row['time']);         

            while($row = $result->fetch_array())
            {
                $count++;

                $newDate = new DateTime($row['time']);
                if(($newDate->getTimestamp() - $date->getTimestamp()) > 600  
                    || $count > 500)
                {
                    array_push($dataTab, $data);
                    $data= "";
                    $count = 0;
                }

                $data = $data . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
                $date = $newDate;
            }
            array_push($dataTab, $data);
        }

由于

编辑:我在这里提供了一些数据样本:http://109.190.92.126/tracker/gpsData.sql 慢脚本:http://109.190.92.126/tracker/map.php 通过分割每个音轨(最多500点)的正常执行速度:http://109.190.92.126/tracker/map_split.php

由于

2 个答案:

答案 0 :(得分:2)

如果您在最糟糕的情况下从数据库中获取18000条记录,您可以将时间戳检查移动到查询中以显着降低它,看起来您正在做的就是查看是否有十分钟的差距然后推送到一个可以在mysql级别完成的数组,这样你每次都不会从数据库中获取18000行,只需要你需要的行。

如果你发布你的mysql查询,我们可以看一下把它放在那里。

编辑:尝试将查询更改为:

pom.xml

答案 1 :(得分:1)

这是最终产品(它在Heroku上所以等到dyno启动) http://sove.herokuapp.com/gps/

解决方案背后的想法是在服务器端计算时间戳中的差异,并操纵数组中的数据。

脚本在我的MBP上以0.278秒完成,占用15.75MB内存,$ts的最终输出是一系列路径(我总共得到7个)。

有很多优化,包括跳过相同的坐标点。地图上的缩放界限不正确但你会弄清楚。 我应该真的要求这份工作的赏金...... 如果您喜欢结果,请告诉我,我可以分享代码库。

来源:https://gist.github.com/jpaljasma/04f54e0d2fa3a632071e