Scrapy不会重新下载最近下载的图像

时间:2016-01-20 09:37:26

标签: python python-2.7 scrapy

Scrapy图像管道声明它禁用了最近下载的图像的重新下载。这是如何实现的?可以在dev中禁用吗?

Src:http://doc.scrapy.org/en/latest/topics/media-pipeline.html 避免重新下载最近下载的媒体

1 个答案:

答案 0 :(得分:2)

Scrapy在下载前检查文件stat 您可以设置IMAGES_EXPIRES = 0为图片禁用此功能。