如何与Selenium并行运行100个Python脚本?

时间:2018-06-13 07:30:04

标签: python python-2.7 selenium selenium-webdriver pycharm

我有一个Python脚本,使用Selenium通过一百个网站。它是一个包含20到000行的大型脚本,每个URL大约需要30分钟。通过所有一百个URL总共需要3000分钟。因此,我想创建一百个脚本,每个URL一个,并且同时运行它们,而不是遍历一个脚本中的循环中的所有URL。有没有办法像这样运行它?我试图在PyCharm中只运行三个脚本,CPU使用率(i7-6600U @ 2.60GHz)几乎达到了100%。考虑到每个脚本都需要运行自己的Chrome实例,最好的方法是什么?

0 个答案:

没有答案