当我安排我的蜘蛛时,然后scrapyd_api.exceptions.ScrapydResponseError:磁盘I / O错误给出错误。为什么会出现这样的问题?
答案 0 :(得分:2)
当您的scrapyd服务器充满其内存空间且scrapyd服务器中没有多余空间时会发生此类错误,会出现此类问题。 所以,如果你看到这样的问题,那么你应该重新启动你的Scrapyd'服务器,然后安排您的蜘蛛与scrapyd_api一起运行。
原因可能是内存泄漏,我不确定但是重启Scrapyd服务器对我有用。