以Curl格式导出Scrapy请求

时间:2016-06-08 16:09:23

标签: python curl scrapy

enter image description here

我使用Postman进行API测试,它可以导入curl命令。

https://www.getpostman.com/docs/importing_curl

可以以这种格式(或任何其他格式)进行scrapy导出吗?这可能有助于调试请求。

2 个答案:

答案 0 :(得分:5)

不完全回答这个问题,但我希望也可以提供帮助。

我记得去浏览器开发者工具,使用"复制为cURL"功能,然后将其粘贴到文本框here并获取Python +请求代码,这应该更容易转换为Scrapy.Request()调用。

答案 1 :(得分:2)

您可以使用minreq从卷曲中剔除Scrapy请求。它甚至只输出必要的数据来成功重复相同的请求。