有没有办法停止谷歌索引任何包含limit = all的页面使用robots.txt
http://domain.com?brand=2058&limit=all
我的域名看起来像这样
答案 0 :(得分:2)
是的,您可以在robots.txt文件中使用以下正则表达式;


Disallow:/ * limit = all

< / pre>&#xA;&#xA;使用Googles网站管理工具进行测试此方法适用于他们的robots.txt测试人员 https://www.google.com/webmasters/tools/robots-testing-tool?hl=en&siteUrl= http://domain.com
&#xA;&#xA;注意:在示例网址中将domain.com替换为您自己的网站
&#XA;