Scrapy链接队列

时间:2019-05-06 20:57:30

标签: python scrapy web-crawler

有没有一种方法可以使scrapy links队列个性化?我当时正在考虑创建一个排名系统,以便优先考虑那些符合我的解析标准的链接。我想知道这在scrapy模块中是否可行。如果可以,我在哪里可以找到有关它的文档(到目前为止,我还没有找到)。

0 个答案:

没有答案