如何通过使用IP阻止来防止站点抓取?

时间:2017-06-27 11:32:35

标签: web-scraping screen-scraping tor

我们的网站遭遇多次攻击。我们基本上是分类商品网站,帮助客户相互连接。

Bots每天通过提供假手机号码从我们的网站窃取数据。我们没有登录机制。用户必须分享他们的联系电话号码才能获得其他用户的联系方式。

我读了这个q / a帖子stackoverflow prevent scrapping

智能机器人可以轻松避免移动到robots.txt中列出的文件,更改cookie,更改用户代理。

即使使用验证码,手动也可以通过输入随机数来窃取数据。

如果每天超过x个潜在客户,我们计划将潜在客户标记为可疑。这里的问题是机器人可以使用像TOR这样的服务来生成无限的IP。我们如何解决这个问题,即如果他们拥有无限的IP和无限数量,那么可以解决这个问题呢?

除了放置OTP之外,所有建议都受欢迎,因为我们已经考虑到了这一点。

0 个答案:

没有答案