403错误urllib抓取网站像谷歌

时间:2015-01-08 13:44:04

标签: python python-3.x urllib

我试图抓取像google这样的网站项目,但我一直在收到403错误。一些网站工作,其他网站不工作。我使用的所有网站都没有谷歌以外的api,所以那就是窗外。任何想法

FNLURL = "https://www.google.com/search?q=test"

try:
    x = urllib.request.urlopen(FNLURL)
    req = urllib.request.Request(FNLURL, headers={'User-Agent': 'Mozilla/5.0'})
    resp = urllib.request.urlopen(req)
    respData = resp.read()
    print(respData)

except Exception as t:
    print(str(t))

0 个答案:

没有答案