标签: proxy watir round-robin
我想抓一个使用不同IP的请求的网站,以便在所有请求仅来自一个IP地址时不被阻止。有问题的网站会在一段时间后阻止我,即使我在每次请求之间暂停20-30秒。
它有一个非常严格的限制,我将需要使用许多代理来克服这一点。很容易将一个代理IP列表放在一个数组中并循环使用它,但我错过了在Ruby Watir中以编程方式在运行时更改代理配置的基本功能。