我们在商店中有大约4,000种产品,但Google正在监控31,000个URL。为了尝试减少索引页面的数量,我已将网站站点管理员中的网址参数限制为:
我认为这会减少索引为每个类别的1个实例的类别页面。
该网站定义了规范的网址标记,全面的robots.txt和每日更新的网站地图。
这是可以接受的还是让Google决定更好?
答案 0 :(得分:1)
一般情况下,如果您对我们认为对您的网站更好的内容感到满意,那么最好留给我们。也就是说,如果Googlebot在抓取不相关或重复的网址时遇到问题,那么当然要继续创建过滤器。
除此之外,如果可以的话,实际上只是禁止抓取URL通常要好得多。这样可以减少错误,并且可以减少机器人页面的流量。
最后,为了真正回答你的问题,这个设置对我来说很好,虽然不知道确切的网址,但很难确定。