标签: python json scrapy
我正在使用python scrapy进行一个项目,我将不断获得项目。 我想将项目输出到一组.json文件,并确保每个文件 包含固定数量的项目,比如1000.我知道scrapy提供了一种方法 输出为json: http://doc.scrapy.org/en/latest/topics/exporters.html
但似乎没有包含生成多个json文件的方法 如上所述自动存储物品。
我想知道是否有人遇到类似问题或有类似需求? 如果可能,如何解决这个问题?提前致谢。