是否可以通过robots.txt阻止僵尸程序(使用Googlebot-Image)访问我网站的图像?
我想到了这段代码:
用户代理:Googlebot-Image 允许:/ images-folder /
用户代理:* 禁止:/ images-folder /
但是我想知道在最终更改robots.txt之前这是否是正确的方法。你觉得怎么样?
答案 0 :(得分:2)
我认为您需要User-agent和Allow / Disallow之间的换行符,如下所示
User-agent: Googlebot-Image
Allow: /images-folder/
User-agent: *
Disallow: /images-folder/