如何获得滚动网站的所有HTML?

时间:2015-11-25 16:04:51

标签: python html python-2.7 urllib

我一直试图获取某些网站的HTML,但我无法获得动态滚动的内容,例如this sitethis site

在第一个产品中,你有一套产品,当你走下去的时候,产品会出现在同一个链接上。

在第二个中,您为每个滚动制作了30个和+30个产品,并且链接会发生变化。

当我这样做时:

htmltext= urllib.urlopen(current_url).read()

在那htmltext中我只找到第一组产品,例如总共134个产品中的30个,我想要它们全部。

我该如何解决这个问题?

0 个答案:

没有答案