在Centos最小的服务器中,我们已经解密了一个应用程序,并且它在早些时候正常运行。现在加载浏览器需要花费太多时间。我检查了Web服务器httpd日志,它显示错误' googlebot'
答案 0 :(得分:0)
1)您可以阻止googlebot的IP地址。
2)或者您可以在文档目录中配置robots.txt文件。
在https://serverfault.com/questions/201035/how-to-block-googlebot-quickly
上查看更多内容