停止googlebot抓取Google街景视图

时间:2018-12-05 10:03:16

标签: api web-crawler googlebot

我网站上的许多页面上都有Google Street View(静态版本)。结果,Googlebot在我的Google API帐户上运行并产生大量活动,这需要花费大量账单。

我不想阻止Google搜寻我的网站或发现自己的图片,但我想以某种方式检测到某个机器人正在访问该网站,并以某种方式将街景视图仅用于机器人。

此:
    User-agent: Googlebot-Image
    Disallow: /images/image.jpg
在这种情况下将无法使用,因为Google仍在搜寻,但不包括结果。

1 个答案:

答案 0 :(得分:0)

只是一个随意的想法,但也许是回答我自己的问题:

  1. 将街景视图放到新的网页中,该网页会显示在iframe中。
  2. 在新页面的META标签中添加NOINDEX。