网站管理员抓取旧网址

Question

我们去年12月更新了网站。之后我们对所需页面进行了301重定向，并且我们避免了旧站点中的一些页面到新站点。

例如：在旧网站中我们有http://www.mydomain.com/article/，在新网站中我们删除了它。

新网站中不存在/删除页面，我们将其重定向到404页面。由于Webmaster -> Crawler Errors -> Not Found类别报告中的某段时间显示旧网址已被编入索引且响应代码为404.此外，从链接>部分显示引用的内部网站链接到这个页面，当我检查这个链接的页面时，找不到它。

我理解通过阅读此谷歌链接http://support.google.com/webmasters/bin/answer.py?hl=en&answer=2409439这些错误不会损害我们的搜索引擎优化但是，我想知道这些事件发生的确切原因？

Answer 1

您应该创建一个XML站点地图并将其呈现给Google，以便了解哪些页面需要和查找。您可以使用网络或其他工具生成此类站点地图，也可以通过网站管理员页面将其添加到Google。