你如何处理guzzel中被拒绝的回复?

时间:2016-01-27 16:57:49

标签: php curl guzzle guzzle6

请考虑以下代码:

public function getItemHistoryForRegion(array $items, array $regions) {

    $client            = new Client(['expect' => false]);
    $acceptedResponses = [];
    $rejectedResponses = [];
    $createdRequests   = [];
    $regionAndItem     = [];

    foreach($items as $item) {
        foreach ($regions as $region) {
            array_push($regionAndItem, [$item, $region]);
            array_push($createdRequests, new Request('GET', 'https://public-crest.eveonline.com/market/'.$region.'/types/'.$item.'/history/'));
        }
    }

    $pool = new Pool($client, $createdRequests, [
        'concurrency' => 10,
        'fulfilled'   => function ($response, $index) use (&$acceptedResponses) {
            EveLogHandler::requestLog($response, 'eve_online_region_item_history_responses.log');
            $acceptedResponses[$index] = json_decode($response->getBody()->getContents());
        },
        'rejected'    => function ($reason, $index) use(&$rejectedResponses)  {
            EveLogHandler::messageLog($reason, 'eve_online_region_item_history_rejected_responses.log');
        },
    ]);

    $promise = $pool->promise();
    $promise->wait();

    $historyDetails = new HistoryDetails($acceptedResponses, $regionAndItem);
    $historyDetails->createHistoryDetails();

    return $historyDetails->getHistoryDetails();
}

我创建了一个请求数组,然后汇总。这里通常会有10,000个请求。

其中一个问题是被拒绝的部分:

'rejected'    => function ($reason, $index) use(&$rejectedResponses)  {
                EveLogHandler::messageLog($reason, 'eve_online_region_item_history_rejected_responses.log');
},

在这里,我只是注销被拒绝的消息,然后返回:

[2016-01-27 16:35:00] production.INFO: Message ["[object] (GuzzleHttp\\Exception\\ConnectException(code: 0): cURL error 52: Empty reply from server (see http://curl.haxx.se/libcurl/c/libcurl-errors.html) at /home/ccccc/test_site/vendor/guzzlehttp/guzzle/src/Handler/CurlFactory.php:186)"] []
[2016-01-27 16:35:57] production.INFO: Message ["[object] (GuzzleHttp\\Exception\\ConnectException(code: 0): cURL error 52: Empty reply from server (see http://curl.haxx.se/libcurl/c/libcurl-errors.html) at /home/ccccc/test_site/vendor/guzzlehttp/guzzle/src/Handler/CurlFactory.php:186)"] []

还有很多这些,因为可能有超过13个排队的工作,每个工作每个发送10,000个请求,因为你可以看到我汇集它们所以我一次做10个。

此api的速率限制为每秒150个请求。所以我知道我没有达到150或者至少我不应该。

我遇到的问题是如何重新审核被拒绝的请求?有没有办法说,失败重试最多x次? guzzle有内置的吗?

1 个答案:

答案 0 :(得分:1)

您收到的卷曲错误可能表示服务器/代理/防火墙速率限制了您;特别是如果您的应用程序向其投掷10k请求。错误本身(至少根据libcurl表示您的应用程序没有收到回复。

我相信您会寻找“重试中间件”或“限速中间件”