标签: web-scraping scrapy
我正在尝试抓取一组网页。但是,访问网页需要某种复杂的登录过程。我想知道在scrapy中是否可以执行以下操作:1)创建一个会话2)在浏览器中弹出登录页面3)使用相同的会话来爬网网页
scrapy
我认为使用formrequest进行自动登录是不可行的,因为登录有两个步骤。
formrequest