网络抓取期间出现“消息:无效的会话ID”

时间:2020-09-22 07:42:20

标签: selenium web-scraping beautifulsoup

我有一个网站,该网站的HTML代码如下所示:

HTML Screen shtot

我的网络抓取代码现在看起来像这样:

from selenium import webdriver
from webdriver_manager.chrome import ChromeDriverManager

url = "https://iclr.cc/virtual_2020/papers.html?filter=keywords"

driver = webdriver.Chrome(ChromeDriverManager().install())
driver.get(url)
stages = driver.find_elements_by_class_name('stage-scheduled')
driver.close()

c = driver.page_source
soup = BeautifulSoup(c, "html.parser")

title = soup.find_all('div', {'class':"myCard col-xs-6 col-md-4"})
print (len(title))

问题是我不断收到“ InvalidSessionIdException:消息:无效的会话ID”。

我可以知道如何解决这个问题吗?预先谢谢你!

0 个答案:

没有答案