lxml.etree.iterparse关闭输入文件处理程序?

时间:2011-07-24 12:21:58

标签: python stringio iterparse

filterous是using iterparse来解析XML StringIO object中的简单unit test。但是,在尝试访问StringIO对象之后,Python将以“ValueError: I/O operation on closed file”消息退出。根据{{​​3}},“从lxml 2.3开始,在错误情况下也会调用.close()方法,”但我没有收到来自Exception的错误消息或iterparse。我的IO-foo显然没有达到速度,所以有人有建议吗?

命令和(希望)相关代码:

$ python2.6 setup.py test

setup.py:

from setuptools import setup
from filterous import filterous as package

setup(
    ...
    test_suite = 'tests.tests',

测试/ tests.py:

from cStringIO import StringIO
import unittest

from filterous import filterous

XML = '''<posts tag="" total="3" ...'''

class TestSearch(unittest.TestCase):
    def setUp(self):
        self.xml = StringIO(XML)
        self.result = StringIO()
    ...
    def test_empty_tag_not(self):
        """Empty tag; should get N results."""
        filterous.search(
            self.xml,
            self.result,
            {'ntag': [u'']},
            ['href'],
            False)
        self.assertEqual(
            len(self.result.getvalue().splitlines()),
            self.xml.getvalue().count('<post '))

filterous / filterous.py:

from lxml import etree
...
def search(file_pointer, out, terms, includes, human_readable = True):
    ...
    context = etree.iterparse(file_pointer, tag='posts')

回溯:

ERROR: Empty tag; should get N results.
----------------------------------------------------------------------
Traceback (most recent call last):
  File "/home/victor/dev/filterous/tests/tests.py", line 149, in test_empty_tag_not
    self.xml.getvalue().count('<post '))
ValueError: I/O operation on closed file

PS:所有测试都在iterparse documentation上正常运行。

2 个答案:

答案 0 :(得分:1)

似乎与StringIO一起正常使用,请尝试使用该代替cStringIO。不知道为什么它会被关闭。

答案 1 :(得分:0)

Docs-fu是问题所在。你引用的内容“从lxml 2.3开始,在错误情况下也会调用.close()方法,”与iterparse无关。它出现在链接页面之前 iterparse上的部分。它是目标解析器接口的文档的一部分。它指的是target(output!)对象的close()方法,与StringIO无关。无论如何,你似乎也忽略了那个小词。在2.3之前,lxml仅在解析成功时才关闭目标对象。现在它在出错时关闭它。

为什么要在解析完成后“访问”StringIO对象?

更新之后尝试访问数据库,您的意思是在测试中调用所有self.xml.getvalue()吗? [在您的问题中显示ferschlugginer回溯所以我们不需要猜测!]如果这导致问题(它确实算作IO操作),请忘记getvalue()...如果它可以工作,不会返回(非常规命名)(不变)XML?