我使用PHP在DOM树中加载网站。有没有办法修改使用DOMDocument::loadHTMLFile()
发送的用户代理?
function parseThis($url)
{
$html = new DOMDocument();
$html->loadHtmlFile( $url );
return $html
}
答案 0 :(得分:6)
更改user_agent
中的php.ini
值,该值应使用DOMDocument::loadHtmlFile(), file_get_contents()
等http流包装器发送。
$fake_user_agent = "Mozilla/5.0 (X11; Linux i686) AppleWebKit/536.11 (KHTML, like Gecko) Chrome/20.0.1132.47 Safari/536.11";
ini_set('user_agent', $fake_user_agent);
如果服务器配置允许,通过设置.htaccess
,也可以在Apache php_value user_agent
中完成相同的操作。
答案 1 :(得分:3)
嗯,我认为最好的方法是以不同的方式检索内容并在之后加载文档。你可以使用cURL来做到这一点。
$useragent = "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.1) Gecko/20061204 Firefox/2.0.0.1";
$ch = curl_init();
// set user agent
curl_setopt($ch, CURLOPT_USERAGENT, $useragent);
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 2);
curl_setopt($ch, CURLOPT_TIMEOUT, 60);
curl_setopt($ch, CURLOPT_HEADER, 0);
// grab content from the website
$content = curl_exec($ch);
// load the content in your dom
$html = new DOMDocument();
$html->loadHTML($content);