scrapy 503错误回调

时间:2014-06-24 13:04:07

标签: python scrapy

当我使用带有FormRequest的scrapy抓取页面时,我遇到了http 503错误。我想问的是当我遇到http 503错误时如何调用函数。 例如,当它引发http 503错误时,scrapy将重试该页面,并且在3次之后它将最终关闭蜘蛛。如果它是http 404错误或500错误,我可以使用FormRequest的errback参数,所以我可以处理异常。但是当引发http 503错误时它不起作用。你能告诉我这个问题的解决方法吗?

0 个答案:

没有答案