谷歌停止索引我的IP和索引

Question

我有一个使用A记录指向我的服务器IP的域。唯一的问题是，谷歌通过域名和IP地址索引我的网站，这在搜索结果中看起来不太好。我怎么能解决这个问题？

Answer 1

根据您在网站上使用的技术，您可以使robots.txt文件足够智能，以允许抓取域名并禁止其使用IP地址。

另一种方法是使用“虚拟主机”或“主机标头”设置您的Web服务器，这将阻止该网站甚至响应对IP地址的请求。