在rails中为许多页面制作站点地图页面

时间:2015-03-12 16:35:19

标签: ruby-on-rails sitemap

我刚注意到谷歌没有抓取我的很多网页。当我搜索这个原因时,我认为站点地图可能是丢失爬行的某些部分的原因,因为我没有站点地图或robots.txt类型的东西。

我有一个非常简单的结构化网站,包括索引,QnA,登录(尚无用户页面)和搜索页面。但是,搜索页面可能会产生许多餐馆的页面,其中 example.com/restaurants/1000001 example.com/restaurants/1160000 ,最多可达160,000个。

我刚刚学习了一些关于站点地图的概念,我认为动态站点地图示例在谷歌中非常多。但我看到超过50,000页需要更多站点地图google sitemap help page

我的网站结构非常简单,但是它会给我的服务器带来一些负担?(是否有必要?)而且我没有明确的标准来分割那些160,000页,那么为googlebot拆分它们可能是一个很好的标准?

任何提示对我都有很大的帮助。谢谢!

0 个答案:

没有答案