在登录

时间:2017-11-02 11:07:09

标签: scrapy scrapy-spider scrapy-shell

我想读一下分页项目清单的“标题”。 335记录差不多。 我想做的是: 1)首先,我在windows cmd中通过此命令获得浏览器的响应:

scrapy shell https://www.slingshotinsights.com/projects

2)它显示了以cmd呈现的HTML,接下来我写了

reponse.css('a.grey-link').extract()

然后按回车键,它会给我[]'空数组'。

问题是,如何从scrapy脚本中获取登录后显示的URL的数据?因为https://www.slingshotinsights.com/projects是用户成功登录页面时出现的链接。

可能是scrapy无法找到

reponse.css('a.grey-link').extract()

css选择器,因为它无法在注销视图中加载。

0 个答案:

没有答案