如何使用python 3下载网站?

时间:2010-12-19 21:10:28

标签: python python-3.x

只是一个http获取请求,比如php中的file_get_contents,或者我输入URL的简单内容,它将内容变为变量。

2 个答案:

答案 0 :(得分:22)

使用urllib

from urllib.request import urlopen
html = urlopen("http://www.stackoverflow.com/").read().decode('utf-8')
print(html)

答案 1 :(得分:0)

您的意图似乎是获取网站的静态版本。这可以使用WGET来实现。该工具可以在一个命令中检索给定URL的文件。 小心使用-r(递归)参数,例如:

wget -erobots = off -p -H -k -E -w 1 -random-wait -r -l 1 http://your.site

Download a working local copy of a webpage