Python请求从错误的页面获取HTML代码

时间:2015-04-18 23:56:53

标签: python html url screen-scraping

所以我开始使用python请求来查看某些网站的html代码。我会做r = requests.get(url)来获取我需要的所有信息。

然而,我注意到这有时不起作用。例如,我正在使用steamcommunity.com获取一些市场数据,因此我使用了url:http://steamcommunity.com/market/search。这将显示超过7,000页的第一页项目。为了获得不同的页面,我使用了这个网址:http://steamcommunity.com/market/search#p4_quantity_desc。这应该会带你到网站的第4页,如果你把它放在浏览器中就可以了。但是,当我去阅读html代码时,我从两个网址获得相同的代码,即使它们应该指向具有不同代码的不同页面。

非常感谢任何帮助!谢谢!

0 个答案:

没有答案