requests.session()无法自动更新cookie

时间:2016-12-10 04:32:06

标签: python python-requests session-cookies

我正在使用python 3.5.2。我想废弃需要cookie的网页。但是当我使用requests.session()时,会话中维护的cookie不会更新,因此我的抓取不断失败。以下是我的代码段。

import requests
from bs4 import BeautifulSoup
import time
import requests.utils

session = requests.session()
session.headers.update({"User-Agent": "Mozilla/5.0 (Windows NT 6.2; WOW64; rv:50.0) Gecko/20100101 Firefox/50.0"})
print(session.cookies.get_dict())
url = "http://www.beianbaba.com/"
session.get(url)
print(session.cookies.get_dict())

你们对此有什么想法吗?非常感谢你们。

1 个答案:

答案 0 :(得分:0)

似乎该网站请求未提供任何Cookie。我使用完全相同的代码,但请求https://google.com

import requests

session = requests.Session()
session.headers.update({"User-Agent": "Mozilla/5.0 (Windows NT 6.2; WOW64; rv:50.0) Gecko/20100101 Firefox/50.0"})
print(session.cookies.get_dict())
url = "http://google.com/"
session.get(url)
print(session.cookies.get_dict())

得到了这个输出:

{}
{'NID': 'a cookie that i removed'}