Scrapy长时间初始化

时间:2018-05-26 18:48:43

标签: python-3.x scrapy web-crawler

最近,当我启动命令" scrapy crawl my_spider"它需要10到15分钟才能启动扩展,启用中间件,管道等,然后开始爬行。之前,这没有发生。对于造成这种巨大低速的原因有何看法?

screenshot1

screenshot2

0 个答案:

没有答案