适用于大型网站的Xml Sitemaps

Question

大型网站如何处理每天删除的数千个旧网址？特别是当网站重命名到一个自定义的错误页面时，击中一个破碎的网址，而不是抛出404错误页面。 （我读过搜索引擎抓取工具不会考虑抛出404错误页面的网址）

Answer 1

如果页面被删除，我强烈建议您使“自定义错误页面”实际返回“410 Gone”HTTP标头。