得到" ParseError"用Scrapy

时间:2014-08-28 18:13:14

标签: python scrapy twisted

大多数时间刮刀正常工作,但有时我会

2014-08-28 11:02:27-0700 [aqicn] DEBUG: Retrying <GET http://site_address_com/> (failed 1 times): [<twisted.python.failure.Failure <class 'twisted.web._newclient.ParseError'>>]

我无法理解为什么会这样。谁有同样的问题?可能是扭曲的虫子?我试着找一些东西,但我只得到部分官方文件。

2 个答案:

答案 0 :(得分:1)

我认为你遇到了this bug。正如你所看到的那样,目前还没有官方修复,只需要一张猴子补丁。

答案 1 :(得分:1)

正如想到@nramirezuy和@ B.Mr.W刮刀在现场被禁止。我使用TOR,现在我没有得到这个错误。谢谢你们的帮助。