我如何使用Python中的LXML捕获XML文件的所有元素名称?

时间:2013-10-18 18:24:05

标签: python xml lxml

我能够使用lxml来完成我想要做的大部分工作,尽管通过模糊的示例和教程是很困难的。简而言之,我能够读取外部xml文件并通过lxml将其导入到适当的树状格式中。

为了证明这一点,如果我输入:

print(etree.tostring(myXmlTree, pretty_print= True, method= "xml") )

我得到以下输出:

<net xmlns="http://www.arin.net/whoisrws/core/v1" xmlns:ns2="http://www.arin.net/whoisrws/rdns/v1" xmlns:ns3="http://www.arin.net/whoisrws/netref/v2" termsOfUse="https://www.arin.net/whois_tou.html">
 <registrationDate>2006-08-29T00:00:00-04:00</registrationDate>
 <ref>http://whois.arin.net/rest/net/NET-79-0-0-0-1</ref>
 <endAddress>79.255.255.255</endAddress>
 <handle>NET-79-0-0-0-1</handle>
 <name>79-RIPE</name>
 <netBlocks>
  <netBlock>
   <cidrLength>8</cidrLength>
   <endAddress>79.255.255.255</endAddress>
   <description>Allocated to RIPE NCC</description>
   <type>RN</type>
   <startAddress>79.0.0.0</startAddress>
  </netBlock>
 </netBlocks>
 <orgRef name="RIPE Network Coordination Centre" handle="RIPE">http://whois.arin.net/rest/org/RIPE</orgRef>
 <comment>
  <line number="0">These addresses have been further assigned to users in</line>
  <line number="1">the RIPE NCC region. Contact information can be found in</line>
  <line number="2">the RIPE database at http://www.ripe.net/whois</line>
 </comment>
 <startAddress>79.0.0.0</startAddress>
 <updateDate>2009-05-18T07:34:02-04:00</updateDate>
 <version>4</version>
</net>

好的,这对人类消费很有用,但对机器没用。如果我想要特定元素,比如说xml中的起始和结束IP地址,我可以输入:

ns = myXmlTree.nsmap.values()[0]
myXmlTree.findall("{" + ns + "}startAddress")[0].text
myXmlTree.findall("{" + ns + "}endAddress")[0].text

我会收到:

'79.0.0.0'
'79.255.255.255'

但是我仍然需要将xml文件看作是一个人来知道那些元素。相反,我希望能够检索特定级别的所有元素的名称,然后自动遍历该级别。所以,举例来说,我想做点什么:

myElements = myXmlTree.findallelements("{" + ns + "}")

它会给我一个返回值,如:

['registrationDate', 'ref', 'endAddress', 'handle', 'name', 'netBlocks', 'orgRef', 'comment', 'startAddress', 'updateDate', 'version']

如果可以告诉我整个元素结构,包括嵌套元素,那就太棒了。

我确定有办法,否则就没有意义了。

提前致谢!!

P.S。,我知道我可以迭代并浏览所有迭代的列表。我希望lxml中已经存在一个包含这些数据的方法。如果迭代是唯一的方法,我猜这没关系......它对我来说似乎很笨拙。

1 个答案:

答案 0 :(得分:4)

我相信您正在寻找element.xpath()

XPath不是lxml引入的概念,而是一种通用查询语言,用于从许多处理XML的事物支持的XML文档中选择节点。可以把它想象成与CSS选择器类似的东西,但功能更强大(也有点复杂)。请参阅XPath Syntax

您的文档使用命名空间 - 我现在将忽略它并在帖子的末尾解释如何处理它们,因为它使示例更具可读性。 (但它们不会按原样用于您的文档。)

所以,例如,

tree.xpath('/net/endAddress')

将在<endAddress>79.255.255.255</endAddress>节点下方直接选择<net />元素。但不是<endAddress />内的<netBlock>

XPath表达式

tree.xpath('//endAddress')

但是会在文档中的任何位置选择所有<endAddress />个节点。

您当然可以使用XPath epxressions进一步查询您获得的节点:

netblocks = tree.xpath('/net/netBlocks/netBlock')
for netblock in netblocks:
    start = netblock.xpath('./startAddress/text()')[0]
    end = netblock.xpath('./endAddress/text()')[0]
    print "%s - %s" % (start, end)

会给你

79.0.0.0 - 79.255.255.255

请注意,.xpath()始终会返回所选节点的列表 - 因此,如果您只想要一个节点,请注明该节点。

您还可以按属性选择元素:

comment = tree.xpath('/net/comment')[0]
line_2 = comment.xpath("./line[@number='2']")[0]

这会从第一条评论中选择带有<line />的{​​{1}}元素。

您也可以自己选择属性:

number="2"

要获取您最后询问的元素名称列表,您可以执行以下操作:

numbers = tree.xpath('//line/attribute::number')

['0', '1', '2']

但鉴于XPath的强大功能,最好只查询文档中您想要了解的内容,具体或松散,如您认为合适。

现在,名称空间。正如您所注意到的,如果您的文档使用XML命名空间,则需要在许多地方考虑这一点,并且XPath也不例外。查询命名空间文档时,将names = [node.tag for node in tree.xpath('/net/*')] ['registrationDate', 'ref', 'endAddress', 'handle', 'name', 'netBlocks', 'orgRef', 'comment', 'startAddress', 'updateDate', 'version'] 方法传递给命名空间映射,如下所示:

xpath()

NSMAP = {'ns': 'http://www.arin.net/whoisrws/core/v1', 'ns2': 'http://www.arin.net/whoisrws/rdns/v1', 'ns3': 'http://www.arin.net/whoisrws/netref/v2'} names = [node.tag for node in tree.xpath('/ns:net/*', namespaces=NSMAP)] 中的许多其他位置,您可以使用lxml作为命名空间映射中的字典键来设置默认命名空间。不幸的是,None不会引发异常

xpath()

因此,您不得不为XPath表达式中的每个节点名称添加前缀TypeError: empty namespace prefix is not supported in XPath (或者您选择将该命名空间映射到的任何地址)。

有关XPath语法的详细信息,请参阅XPath Syntax中的W3Schools Xpath Tutorial页面。

要开始使用XPath,在许多XPath testers之一中摆弄文档也非常有用。此外,Firefox的Firebug插件或Google Chrome检查器允许您显示所选元素的(或更确切地说,多个)XPath。