无法从网页中获取表格中的所有pdf链接

时间:2018-12-22 23:42:12

标签: python selenium selenium-webdriver web-scraping

我已经用python与硒结合编写了一个脚本,以抓取点击不同数字后生成的不同 pdf 链接,例如{{ 1}},110015710等位于网页表格中。

Site link

我的脚本可以单击那些链接,显示110015670文件,但只解析其中的5个。

如何获得所有这些信息?

到目前为止,我已经尝试过:

pdf

1 个答案:

答案 0 :(得分:0)

当您单击该元素将执行XHR请求pdf链接时,请在每次单击后添加延迟。

for item in wait.until(EC.presence_of_all_elements_located((By.CSS_SELECTOR,"tr.Iec"))):
    driver.execute_script("arguments[0].click();",item)
    time.sleep(1)