我今天几次使用scrapy shell没有问题。然后我跑了一只蜘蛛,蜘蛛被杀了。现在我甚至无法启动它,它在大约10秒后被杀死。我重启几次......没有解决问题。我能够在另一个virtualenv中启动django。内存资源看起来很好。有谁对这个谜团有任何见解?我确实在/var/log/kern.log
中看到了以下内容scrapy invoked oom-killer: gfp_mask=0x24280ca, order=0, oom_score_adj=0
scrapy cpuset=/ mems_allowed=0
谢谢。
修改/更新
还看到了这个:
Out of memory: Kill process 13170 (scrapy) score 803 or sacrifice child