SEO:爬虫如何考虑PHP构建的页面?

时间:2014-05-15 01:55:10

标签: php seo web-crawler

使用PHP生成的两个HTML网页。 一个脚本创建一个由两个网页引用的页脚。

抓取工具是否会将页脚HTML内容视为一次或两次?

1 个答案:

答案 0 :(得分:6)

爬行者不会或不关心服务器端代码。他们只看到请求的URL输出的内容,就像任何用户代理一样。