我正在尝试为网页设置robot.txt但是在测试时不允许这样做
想要阻止感谢页面
http://designs.webelevate.net/wordpress/index.php/contact-thank-page/
使用代码
禁止:/index.php/contact-thank-page /
有什么建议吗?
答案 0 :(得分:0)
您现在拥有的行只会阻止root用户的URL。例如它将阻止以下URL(注意:wordpress /被删除)。
http://designs.webelevate.net/index.php/contact-thank-page/
要展开此选项以包含您注意到的URL,请将/ wordpress添加到disallow中,或在路径中添加*,如下所示。
Disallow: */index.php/contact-thank-page/