禁止包含目录的URL

时间:2015-10-27 02:12:33

标签: robots.txt

我的网址如下:

www.website.com/user/1
www.website.com/user/2
www.website.com/user/3

如您所见,它们都包含/user/,然后是数字。如何在robots.txt中禁止这样的网址?感谢。

1 个答案:

答案 0 :(得分:0)

将此添加到您的robots.txt

Disallow: /user/