我正在尝试使用Scrapy抓取网站。它可以访问状态代码为200的robots.txt文件
但是我在终端中发送请求:
[scrapy.core.engine] DEBUG: Crawled (555) <POST https://www.<the_link>.ca/<part_of_link>/UpdateQuery> (referer: None)
b'{"d":{"Message":"SESSION_TIMEOUT","Result":null,"Succeeded":false}}'
我尝试在Internet上查找有关555的内容。但是,我找不到太多的解释。
从https://httptoolkit.tech/blog/new-http-status-code-555”那里获得了一些信息,但并不清楚。
我在Postman上尝试过。第一次发送请求时出现555错误,第二次发送状态代码为200。
但是,如何在Scrapy中的脚本上解决这个问题?
如果有人可以帮助我解决这个问题,我会感到很高兴。
谢谢。