Python请求 - 403禁止 - 尽管设置了`User-Agent`标头

时间:2017-07-13 16:30:04

标签: python web-scraping python-requests

import requests
import webbrowser
from bs4 import BeautifulSoup

url = 'https://www.gamefaqs.com'
#headers={'User-Agent': 'Mozilla/5.0'}    
headers ={'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.115 Safari/537.36'}


response = requests.get(url, headers)

response.status_code正在返回403。 我可以使用firefox / chrome浏览网站,所以这似乎是一个编码错误。

我无法弄清楚我犯的是什么错误。

谢谢。

2 个答案:

答案 0 :(得分:3)

如果您通过Session对象发出请求,则此方法有效。

import requests

session = requests.Session()
response = session.get('https://www.gamefaqs.com', headers={'User-Agent': 'Mozilla/5.0'})

print(response.status_code)

输出:

200

答案 1 :(得分:1)

使用关键字参数对我有用:

import requests
headers={'User-Agent': 'Mozilla/5.0'}
response = requests.get('https://www.gamefaqs.com', headers=headers)