Pycurl和io.StringIO - pycurl.error:(23,'写体失败)

时间:2013-10-26 12:00:26

标签: python curl python-3.x pycurl stringio

我正在将ebay sdk移植到python3,我偶然发现了以下问题。

我正在使用pycurl发送一些HTTP请求。 以下是我配置它的方法:

    self._curl = pycurl.Curl()
    self._curl.setopt(pycurl.FOLLOWLOCATION, 1)
    self._curl.setopt(pycurl.URL, str(request_url))
    self._curl.setopt(pycurl.SSL_VERIFYPEER, 0)

    self._response_header = io.StringIO()
    self._response_body = io.StringIO()

    self._curl.setopt(pycurl.CONNECTTIMEOUT, self.timeout)
    self._curl.setopt(pycurl.TIMEOUT, self.timeout)

    self._curl.setopt(pycurl.HEADERFUNCTION, self._response_header.write)
    self._curl.setopt(pycurl.WRITEFUNCTION, self._response_body.write)

当我调用self._curl.perform()时,我收到以下错误:

pycurl.error: (23, 'Failed writing body (1457 != 1460)')

据我所知,这意味着写函数存在问题,但我无法弄清楚它究竟是什么。可能与从StringIO模块迁移到io有关,但我不确定。

UPD : 我尝试了以下内容:

    def body(buf):
        self._response_body.write(buf)

    def header(buf):
        self._response_header.write(buf)

    self._curl.setopt(pycurl.HEADERFUNCTION, header)
    self._curl.setopt(pycurl.WRITEFUNCTION, body)

它有效。我试图用lambdas做同样的技巧(而不是定义那些笨拙的功能,但它没有用。

1 个答案:

答案 0 :(得分:22)

我认为问题是pycurl不再像StringIO那样适用于所需的功能。解决方案是使用io.BytesIO。然后,您可以将信息写入缓冲区并将其解码为字符串。

使用BytesIO和pycurl而不是StringIO:

e = io.BytesIO()
c.setopt(pycurl.WRITEFUNCTION, e.write)

解码BytesIO对象的字节信息:

htmlString = e.getvalue().decode('UTF-8')

您可以使用任何类型的解码,但这应该为您提供一个可以解析的字符串对象。

希望这可以帮助使用Python 3的人。