尝试使用Scrapy进行抓取时使用555 HTTP协议

时间:2020-07-01 20:32:23

标签: python scrapy

我正在尝试使用Scrapy抓取网站。它可以访问状态代码为200的robots.txt文件

但是我在终端中发送请求:

[scrapy.core.engine] DEBUG: Crawled (555) <POST https://www.<the_link>.ca/<part_of_link>/UpdateQuery> (referer: None)
b'{"d":{"Message":"SESSION_TIMEOUT","Result":null,"Succeeded":false}}'

我尝试在Internet上查找有关555的内容。但是,我找不到太多的解释。

https://httptoolkit.tech/blog/new-http-status-code-555”那里获得了一些信息,但并不清楚。

我在Postman上尝试过。第一次发送请求时出现555错误,第二次发送状态代码为200。

但是,如何在Scrapy中的脚本上解决这个问题?

如果有人可以帮助我解决这个问题,我会感到很高兴。

谢谢。

0 个答案:

没有答案