为什么Facebook充斥我的网站?

时间:2012-03-19 16:27:59

标签: facebook web-crawler

每隔一个半小时我就会收到来自http://www.facebook.com/externalhit_uatext.php的大量请求。

我知道这些请求应该是什么意思,但这种行为很奇怪。

定期(大约每1.5小时一次),我每分钟都会收到十几个这样的请求到我网站的旧帖子 - 这让我头疼,因为它们没有缓存......

有谁知道这可能是什么?在什么情况下facebook会这样做?

利奥,,

记录样本:

66.220.158.251, 200.147.35.64 (5715) - - [19/Mar/2012:09:44:40 -0300] "GET /2009/10/catraca-ensina-como-fazer-um-bom-negocio-no-sebo/ HTTP/1.0" 200 23538 "-" "facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)"
69.171.229.251, 200.147.96.73 (590684) - - [19/Mar/2012:09:45:08 -0300] "GET /2012/02/ganhador-da-promocao-comece-2012-discotecando/ HTTP/1.0" 200 22716 "-" "facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)"
69.171.242.248, 200.147.35.65 (661588) - - [19/Mar/2012:09:45:28 -0300] "GET /2012/01/elza-soares-e-trio-no-palco-do-auditorio-ibirapuera/ HTTP/1.0" 200 24699 "-" "facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)"
66.220.149.248, 200.147.35.65 (5367) - - [19/Mar/2012:09:45:43 -0300] "GET /2011/03/projeto-coisa-fina-leva-musica-instrumental-ao-ccsp/ HTTP/1.0" 200 22555 "-" "facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)"

1 个答案:

答案 0 :(得分:5)

Facebook Linter将定期访问您的网页以更新OpenGraph数据,这不是您可以控制的内容,但您应该考虑以下几点:

  • 为您的网页提供正确且适当的缓存/ ETag。
  • 缓存数据(至少对于匿名用户来说,这应该是Facebook僵尸网站的情况)。