我正致力于使我的角度js网站可以被搜索机器人读取。我的解决方案是提供我想要使其可读的页面的静态版本,指示机器人请求' / page?_escaped_fragment _ ='对于' / page'的内容通过元名="片段"含量="!"'标签。然后,我的服务器将此请求重新路由到' page / searchbot'它为机器人提供了静态版本的页面。
问题是我不想要' page / searchbot'要编入索引,但显然我希望它被抓取。我已经查看了" noindex"的规范。机器人标签的价值,并且无法找到任何明确说明是否将此无索引值添加到' / page / searchbot'将阻止我想索引的页面(' / page')被编入索引。
我的问题是:如果我添加" noindex"标记为' page / searchbot',机器人仍会抓取内容,并将其作为' / page'的内容提供,正确索引' / page',同时忽略' page / searchbot'?
感谢,
保