我正在运行phantomJS并使用它来抓取网站的“客户端ID”和“网站密钥”。我想实现网站密钥&客户端ID进入python中的请求会话,以访问我在PhantomJS浏览器会话中所做的同一个网页。有关如何使用python中的请求完成此任务的任何提示。
请注意我已经找到了如何刮网站,我只是不明白如何实施SITE KEY&客户端ID进入我的python请求会话!
这是我试过的,
client id: '842085ea-09be-46e0-b0b4-9d7535ad5b69'
site key: '6Ler0hUUAAAAANikfVz6I1o0Mdzj0hwX2XFsl4Oy'
headers = {
'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/57.0.2987.98 Safari/537.36',
'Accept-Encoding': 'gzip, deflate, sdch, br',
'Accept-Language': 'en-US,en;q=0.8',
'Upgrade-Insecure-Requests': '1'
}
requests.get('http://www.adidas.com/us/pureboost-shoes/CG2986.html' , headers=headers, auth=HTTPBasicAuth('842085ea-09be-46e0-b0b4-9d7535ad5b69','6Ler0hUUAAAAANikfVz6I1o0Mdzj0hwX2XFsl4Oy')
这里