使用curl获取多个url

Question

需要使用curl获取存储在.txt文件中的多个网址的代码示例和/或指南。我是否需要使用蜘蛛，或者我可以修改下面适用于一个网址的代码吗？

<?php
$c = curl_init('http://www.example.com/robots.txt');
curl_setopt($c, CURLOPT_RETURNTRANSFER, true);
$page = curl_exec($c);
curl_close($c);
?>

Answer 1

您的问题很模糊，但我会尝试用您提供的信息回答。

我会使用explode() PHP function。

$lines = explode(PHP_EOL, $page);

foreach($lines as $line) {
    $val = explode(':', $line);
    echo $val[1];
}

这样的事情应该可以胜任。