我想阻止htaccess网址文件(https://www.example.com/files/example/index.html)用于Google机器人。通过搜索引擎搜索,我发现了类似的东西:
RewriteEngine on RewriteCond% {HTTP_USER_AGENT} Googlebot [OR] RewriteRule ^. * $ "Http \: \ / \ / yordomain \ .com" [R = 301, L]
此文件用于域,我想阻止特定的URL,如何保存?
答案 0 :(得分:1)
为什么要在htaccess中使用它?
尝试使用robots.txt
将文件和代码放入public_html
文件夹中。
User-agent: *
Disallow: /path/to/the/page/rate
否则,您可以制作一个.htaccess
文件并将其保存在public_html
文件夹中。
查看此帖子How to block Googlebot from accessing one specific page