使用Tor进行网页抓取时被禁止-硒

Question

我正在使用Selenium抓取网站，退出并重新打开浏览器时我的IP被禁止（我不得不退出浏览器，因为搜索时间很长，因此如果我不这样做，我会得到一个很多减速）。

因此，我决定进行一些更改，并使用Tor网络驱动程序代替Mozilla网络驱动程序。我认为这样做不会被该网站认可，因为一旦退出并重新打开Tor，您将获得一个不同的IP。但是，我仍然收到MaxRetryError ...

您能帮助我理解原因并找到一些解决方法吗？谢谢。