标签: python encryption https scrapy wireshark
我正在使用连接到https站点(TLS 1.2)的scrapy(python模块)编写爬虫程序。我想使用wireshark,看看发生了什么。我可以使用描述here的方法对firefox执行此操作(简而言之:导出SSLKEYLOGFILE = ...,启动firefox,将wireshark指向此文件,享受)。我可以用scrapy做同样的事吗?
所需的解决方案将是scrapy或某些scrapy中间件的子类的设置,可以保存ssl密钥文件。或者也许这可以用于处理ssl的python模块?