标签: robots.txt
我的网址如下:
www.website.com/user/1 www.website.com/user/2 www.website.com/user/3
如您所见,它们都包含/user/,然后是数字。如何在robots.txt中禁止这样的网址?感谢。
/user/
答案 0 :(得分:0)
将此添加到您的robots.txt
Disallow: /user/