我试图抓取像google这样的网站项目,但我一直在收到403错误。一些网站工作,其他网站不工作。我使用的所有网站都没有谷歌以外的api,所以那就是窗外。任何想法
FNLURL = "https://www.google.com/search?q=test"
try:
x = urllib.request.urlopen(FNLURL)
req = urllib.request.Request(FNLURL, headers={'User-Agent': 'Mozilla/5.0'})
resp = urllib.request.urlopen(req)
respData = resp.read()
print(respData)
except Exception as t:
print(str(t))