如何为Scrapy实现自己的存储后端?

时间:2017-05-24 11:58:04

标签: python scrapy

我想通过Feed导出方式将抓取结果保存到redis

那么,如何为Scrapy

实现自己的存储后端

1 个答案:

答案 0 :(得分:0)

如果您要将已抓取的项目保存到redis,建议您使用scrapy redisRedisPipeline

对于其他数据库,您应该使用自定义Pipeline。我会让你检查scrapy docMongoDB例子。