我怎么能不否认,但减慢来自某个IP的爬虫的请求[nginx]

时间:2015-07-06 16:50:59

标签: nginx

我有一个专横且未经授权的抓取工具试图以非常高的请求率抓取我的网站。当我看到这个时,我在我的nginx.conf中拒绝了IP地址,但几周后我看到来自另一个IP地址的同一个爬虫(它遵循相同的爬行模式)。

我想反击不仅仅是通过立即回送403,而且还通过减慢响应时间,或者对于这个爬虫的程序员同样不方便和令人沮丧的东西。有什么建议?

我想手动定位此抓取工具。我已经尝试过nginx limit_req_zone,但是配置方式太复杂了,不会影响有效请求。

0 个答案:

没有答案