如何阻止google抓取我的页面，但仍然允许百度这么做？

Question

我只想阻止Google抓取我网站上的特定页面，但我仍然希望其他搜索引擎（首先是百度）抓取它。

我不知道是否有可能。

Answer 1

您需要创建一个 robots.txt 文件，该文件会阻止Google的userAgent

//在robots.txt中

User-agent: Googlebot
Disallow: /

User-agent: *
Allow: /

在此处详细了解robots.txt：https://support.google.com/webmasters/answer/6062596?hl=en