创建完整路径链接和爬网循环

时间:2016-01-23 20:58:22

标签: python web-scraping scrapy

我正在使用scrapy来解析一个网站

我可以使用以下代码生成页面中感兴趣的链接列表:

response.xpath('//a[@class="button-border"]/@href').extract()

然而,它返回一个包含相对链接的列表,如何创建绝对链接,抓取所有链接并将另一组规则应用于每个链接?

0 个答案:

没有答案