通过cmd运行刮板(scrapy)时未创建新目录或文件

时间:2018-09-04 17:23:10

标签: python python-3.x web-scraping scrapy scrapy-spider

this is the main file

this is the settings file

pipelines.py file

items.py file

每当我运行刮板时,都应该创建一个json文件。抓取工具工作正常,但不会将内容保存到文件中。

1 个答案:

答案 0 :(得分:0)

您需要像下面在settings.py

中那样定义FEED_URI
FEED_URI = 'file:///E:/python/venv/demo/temp/%(Name)s-%(time)s.json'

%(Name)s将替换为蜘蛛的名称,%(time)s将替换为运行搜寻器的时间,从而每次都创建一个新文件。