允许Googlebot抓取动态生成的产品页面

时间:2016-10-17 21:10:06

标签: javascript web-crawler google-search googlebot

我一直在研究Googlebot如何抓取javascript生成的网页,但我仍然对此感到困惑。

说我有一个公司XYZ公司的网页,有5种普通产品,如浴巾和铅笔。

如何允许Googlebot将www.xyzinc.com/products/bath-towels编入索引,以便它显示在Google搜索结果中,例如:

XYZ Inc. - Bath Towels
www.xyzinc.com/products/bath-towels
some description here

我的一个想法是创建一个站点地图,其中包含嵌套链接中页面上所有产品的生成列表,其中包含我可以提供给Google Search Console的链接,但我不知道这是否正确去做吧。

2 个答案:

答案 0 :(得分:1)

之前我遇到过动态页面的问题。对我有帮助的是:

  • 将所有这些链接添加到站点地图。
  • 通过自定义网址访问链接。 (假设我的网站上的每个搜索都会生成新页面,如果它不存在其唯一的网址)。
  • 使每个页面都是唯一的。

答案 1 :(得分:1)

我使用2件事来允许Googlebot抓取动态生成的页面

  1. 路由(创建智能网址)

  2. 我创建静态页面重新构建带有链接的动态页面 它们