使用交互式按钮抓取网站

时间:2016-03-29 17:44:39

标签: python pandas web-scraping

我是一个全新的网站。 我正在尝试从https://www.ssa.gov/oact/NOTES/as120/LifeTables_Tbl_7.html

下载表格

我们使用网站的方式是从按钮中选择一年,然后按" Go",然后显示所选年份的表格,我想保存表格。

我想应该有一种模拟人类选择年份的方法,例如,自动选择1900然后按"去" ,然后循环100次以记录1900-2000的表格。但我不知道如何模拟这种人类行为。

我知道如何在桌子出现后下载桌子,但我不知道如何让桌子出现。

谢谢!

1 个答案:

答案 0 :(得分:1)

https://www.ssa.gov/oact/NOTES/as120/LifeTables_Tbl_7_**1950**.html

https://www.ssa.gov/oact/NOTES/as120/LifeTables_Tbl_7_**2030**.html

就像你看到的那样,唯一改变的是年份。所以,当你去刮一个网站。你需要抓https://www.ssa.gov/oact/NOTES/as120/LifeTables_Tbl_7_" + TheYearIWant + ".html