每次添加标记时,Google网站管理员工具都会根据以下路径为标记创建404错误
EG:
tag/<tag name1>/contact
tag/<tag name2>/contact
我有以下不允许使用我的robots.txt文件
Disallow: /tag/
为什么我会收到此错误?
有没有办法在.htaccess中排除这些可能是重定向还是有办法解决404?
似乎很奇怪Disallow不会阻止谷歌尝试索引吗?
网站:www.simonjohn.co.uk
感谢您的帮助!
答案 0 :(得分:1)
这可能是因为这些代码在您的站点地图中列出:http://simonjohn.co.uk/post_tag-sitemap.xml Google可能比robots.txt更高优先级
我很确定你正在使用的Yoast插件有一个禁用标记索引的选项,请查看选项页面。