PHP:使用file_get_contents的大量请求

时间:2015-02-26 10:49:25

标签: php mysql api file-get-contents

我目前有一个填充组织编号[1,002百万行]的数据库表。

现在,我想要做的是从远程网站API获取组织的电话号码。我已经有了这个工作,但是在对API提出30-50左右的请求之后,我没有看到对表格进行任何新的更改即可将电话号码插入。我还有100万++行来从中获取电话号码,但我似乎无法获得超过少量行。

提前感谢您的帮助。

我不知道这是否会有所帮助,但这里是我用来执行此操作的代码。

// Remove timeout limit
// This is going to take alot of time!
set_time_limit(0); 

// Initialize...
include $_SERVER['DOCUMENT_ROOT'] . '/core/Init.php';

// Profiles
$url = 'http://finnrett.no/API/business/get/quickresults?q=';
$profile_url = 'http://finnrett.no/API/business/get/profile?id=';

// Select names
$sql = 'SELECT organisasjonsnummer FROM brreg  ORDER BY id LIMIT 10000';
$result = $Dbh -> query($sql, []);

// Each name
foreach ($result as $orgnr) {

    // Pre for output explananation
    echo'<pre>';

    // Grab json from quick results url
    $bedrift = json_decode(file_get_contents($url.$orgnr['organisasjonsnummer']));
    $ID = get_object_vars($bedrift[0])['ID'];

    $profile = json_decode(file_get_contents($profile_url.$ID));
    $CONTACT = get_object_vars($profile);
    $number = $CONTACT['contact'] ? $CONTACT['contact']: '0';

    $sql = 'INSERT INTO profiles (orgnr, telefon) VALUES (:orgnr, :telefon)';
    $args = ['orgnr' => $orgnr['organisasjonsnummer'], 'telefon' => $number];
    if (!$Dbh -> query($sql, $args)) {
        echo 'Sjekk opp org: ' . $orgnr['organisasjonsnummer'] . ' fordi her skjedde det noe galt.';
    }


}

看起来我通过选择curl而不是file_get_contents来解决它。

1 个答案:

答案 0 :(得分:0)

切换为curl代替file_get_contents()

解决了问题