如何在Scrapy中禁用双重打印?

时间:2018-09-25 15:30:56

标签: web-scraping scrapy scrapy-spider

由于某些原因,使用以下命令启动Scrapy脚本时:

scrapy runspider myspider.py

脚本两次打印在 Class 描述符和 parse 函数定义之间发生的所有事情!

...
class MySpider(Spider): 
    ...
    print (start_urls)
    ...
    def parse(self, response):
    ...

运行上述操作将两次打印start_urls列表。

第一季度:为什么会发生这种情况?

第二季度:如何防止重复打印?

0 个答案:

没有答案