如何在使用scrapy时显示隐藏可见性的div

Question

我使用scrapy抓取页面并且不知道如何获取隐藏可见性的div的内容。

我使用了xpath response.xpath（＆＃39; // div [@class =＆＃39; abc＆＃39;]＆＃39;）。extract（）但得到了一个空列表。

我该怎么做才能解决这个问题？

任何帮助将不胜感激！

Answer 1

而不是：

response.xpath('//div[@class='abc']').extract()

使用它：

response.xpath("//div[@class='abc']").extract()

备注双引号。