标签: javascript html google-crawlers
对于一家电子商务商店,我们在收集页面上有一个过滤器可能性。这是通过获取表单完成的。例如:产品A有白色或黑色。在过滤器表单上点击“白色复选框”后,以下链接将动态打开:
URL:store.com/collectionpage/?filter%5B%5D = 472109
问题在于,搜索引擎现在正在抓取那些疯狂的链接,并且在抓取预算。不索引或不关注这些链接的最佳方法是什么?
注意事项: