scrapy脚本在某些请求后停止

时间:2017-05-31 07:27:15

标签: python web-scraping scrapy-spider scrapinghub

我在scrapinghub上运行了一个scrapy脚本。刮刀将一个参数作为存储URL的csv文件。脚本运行没有错误,但问题是它没有从URL中抓取所有项目。我不知道为什么会这样。此日志也没有提供有关此信息。任何人都可以知道为什么会这样吗?

0 个答案:

没有答案