robots.txt url阻止

时间:2017-10-29 14:31:09

标签: seo

我正在尝试为网页设置robot.txt但是在测试时不允许这样做

想要阻止感谢页面

http://designs.webelevate.net/wordpress/index.php/contact-thank-page/

使用代码

禁止:/index.php/contact-thank-page /

有什么建议吗?

1 个答案:

答案 0 :(得分:0)

您现在拥有的行只会阻止root用户的URL。例如它将阻止以下URL(注意:wordpress /被删除)。

http://designs.webelevate.net/index.php/contact-thank-page/

要展开此选项以包含您注意到的URL,请将/ wordpress添加到disallow中,或在路径中添加*,如下所示。

Disallow: */index.php/contact-thank-page/