Python3 requests.get忽略我的部分URL(BEAUTIFULSOUP + PYTHON WEBSCRAPING)

时间:2017-06-07 14:01:35

标签: python-3.x web-scraping beautifulsoup

我正在使用requests.get如此:

urllib3.disable_warnings()
cookies = {
    'PYPF': '3OyMLS2-xJlxKilWEOSvMQXAhyCgIhvAxYfbB8S_5lGBxxAS18Z7I8Q',
    '_ga': 'GA1.2.227320333.1496647453',
    '_gat': '1',
    '_gid': 'GA1.2.75815641.1496647453'
}
params = {
    'platform': 'xbox'
}
page = requests.get("http://www.rl-trades.com/#pf=xbox", headers={'Platform': 'Xbox'}, verify=False, cookies=cookies, params=params).text
page
soup = BeautifulSoup(page, 'html.parser')

...等

但是,根据我的测试结果,似乎requests.get忽略了'http://www.rl-trades.com/#pf=xbox'中的'/#pf = xbox'。

这是因为我必须将验证设置为false吗?这里发生了什么?

0 个答案:

没有答案