标签: python python-3.x python-requests warc
我正在使用warcio库来读写warc个文件。
warcio
warc
当尝试从requests.get(URL,stream=False)写入响应对象的记录时,warcio仅将HTTP标头写入记录而不写入有效负载。但是,当启用流模式时,它可以正常工作。
requests.get(URL,stream=False)
在未启用流模式时,是否存在存储有效负载的方法?
答案 0 :(得分:0)
我找到了解决方法,但不确定它是否正确。我没有使请求对象可流化,而是使有效负载可以流式传输 BytesIO(response.text.encode())这似乎有效。
BytesIO(response.text.encode())