在scrapy shell中传递用户名/密码(Formdata)

时间:2014-04-11 21:59:50

标签: python web-scraping scrapy

有没有办法在scrapy shell中传递formdata? 我正在尝试从经过身份验证的会话中抓取数据,并且通过scrapy shell检查xpath等等会很好。

1 个答案:

答案 0 :(得分:0)

一种解决方法是首先使用scrapy登录(使用FormRequest),然后在解析方法中调用inspect_response(response)