标签： python web-scraping
我使用以下代码打开网页
cj_civil = cookielib.LWPCookieJar() opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cj_civil))
问题是opener.open函数需要大约20秒才能加载网页。但是如果我在浏览器中打开相同的网站，那么加载速度会更快。
如何在代码中更快地加载网页？我也使用正确的标头值。
对于urllib2有什么替代方法比urllib2更快并且还能自动处理cookie吗？