Maxmind GeoIP - 如何识别来自Google,Yahoo或Bing机器人的请求以避免重定向

时间:2015-11-12 05:36:07

标签: geoip maxmind

我们根据Maxmind API返回的国家/地区将客户重定向到特定国家/地区的网站。但由于这一点,当请求来自搜索引擎机器人时,这些机器人可以根据机器人运行的国家/地区拥有任何IP,这些请求也会被重定向到相应的国家/地区特定站点。对于例如由于请求被重定向到美国站点,因此从美国运行的机器人无法抓取英国站点。由于此机器人无法抓取目标网站,因此当从特定国家/地区的Google域(例如co.uk)进行搜索时,排名会受到影响并且国家/地区特定网站不会显示在顶部。我们可以添加逻辑来处理这种情况。但是将来当机器人添加新的IP范围或引入任何新的机器人时,我们需要再次更新代码。因此,这种方法看起来并不可行。 Maxmind是否有更好的方法来处理此类异常?

0 个答案:

没有答案