暂时阻止Google抓取工具,它会阻止将来编制索引吗?

时间:2011-04-14 19:06:09

标签: indexing

有时我需要为我的网站添加几个更新。为了保持清洁,我会显示一个维护页面。我第一次这样做,它成为谷歌的主要索引页面。因此,我添加了元标记<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">以防止这种情况发生。我的问题是,如果谷歌遇到这个临时维护页面他不会将其编入索引,但这是否意味着他永远不会再次索引该页面?或者一旦有新内容,他们会再次索引页面吗?

如果有人能为我解决这个问题我真的很感激

2 个答案:

答案 0 :(得分:8)

Google有处理计划维护/停机时间的指南:“How to deal with planned site downtime”。简而言之,您应该在那些正在维护或已关闭的页面上返回503 HTTP结果代码。这是一个在这些页面上使用的示例php代码:

header('HTTP/1.1 503 Service Temporarily Unavailable');

如果您知道完成维​​护/停机时间的确切/大致时间/日期,您可以使用这样的可选Retry-After标题(以及上面的503 HTTP结果代码):

//when the exact completion time is known.
header('Retry-After: Sat, 8 Oct 2011 18:27:00 GMT');

//when the length of the downtime in seconds is known.
header('Retry-After: 86400');

有关详细信息,请参阅Google article

答案 1 :(得分:4)

一旦删除该元标记,Google的抓取工具就会重新为您的网站建立索引(它会不断更新其索引)。

如果您真的很偏执,我建议您查看Google的网站管理员工具,以便直接控制您网站的索引行为:http://www.google.com/webmasters/