如何让网页抓取工具等到JavaScript函数不执行?

时间:2019-11-24 11:12:46

标签: python

我必须抓取一个有很多日期的网页。问题在于,页面加载时会显示“等待片刻”,然后在一两秒钟后显示日期。 Python请求库从网页读取html,当我使用包含日期的BeautifulSoup搜索类时,它返回“稍等片刻”而不是日期。 `

html= requests.get(url).text
date_soup = BeautifulSoup(html, 'lxml')
tag = date_soup.find_all(class_='Subhead-heading js-date-range')
print(tag[0])

`

0 个答案:

没有答案