我实际上正在网上搜索这个问题的正确用语,但几个小时后我决定在这里发布我的问题。
情景是: 我们有一个在两台服务器上运行的网站。因此文件/网站在这两个服务器中同步。我们有第二台服务器用于内部目的。我们将第一台服务器命名为www,将第二台服务器命名为ww2。在www。
中更新文件后,ww2会自动更新现在,谷歌正在索引我想停止的ww2,只是让www被抓取并编入索引。我的问题是: 1.如何删除从Google索引中删除的ww2中的已抓取页面? 2.如何阻止谷歌索引ww2?
谢谢你们!
答案 0 :(得分:1)
您只需使用robots.txt即可禁止编制索引。并且谷歌遵守了robots meta tag。
答案 1 :(得分:0)
对于您的第一个问题,Google在其网站管理员工具中有一个删除工具,有关它的更多信息Remove page or site from Google's search results
对于第二个问题,您可以使用robots.txt文件阻止Google抓取您的网站(这里有更多信息Blocking Google),或者您可以限制对该服务器的访问权限