python Scrapy:如何控制输出json文件中的项目?

时间:2014-05-25 22:24:03

标签: python json scrapy

我正在使用python scrapy进行一个项目,我将不断获得项目。 我想将项目输出到一组.json文件,并确保每个文件 包含固定数量的项目,比如1000.我知道scrapy提供了一种方法 输出为json: http://doc.scrapy.org/en/latest/topics/exporters.html

但似乎没有包含生成多个json文件的方法 如上所述自动存储物品。

我想知道是否有人遇到类似问题或有类似需求? 如果可能,如何解决这个问题?提前致谢。

0 个答案:

没有答案