我能够使用lxml来完成我想要做的大部分工作,尽管通过模糊的示例和教程是很困难的。简而言之,我能够读取外部xml文件并通过lxml将其导入到适当的树状格式中。
为了证明这一点,如果我输入:
print(etree.tostring(myXmlTree, pretty_print= True, method= "xml") )
我得到以下输出:
<net xmlns="http://www.arin.net/whoisrws/core/v1" xmlns:ns2="http://www.arin.net/whoisrws/rdns/v1" xmlns:ns3="http://www.arin.net/whoisrws/netref/v2" termsOfUse="https://www.arin.net/whois_tou.html">
<registrationDate>2006-08-29T00:00:00-04:00</registrationDate>
<ref>http://whois.arin.net/rest/net/NET-79-0-0-0-1</ref>
<endAddress>79.255.255.255</endAddress>
<handle>NET-79-0-0-0-1</handle>
<name>79-RIPE</name>
<netBlocks>
<netBlock>
<cidrLength>8</cidrLength>
<endAddress>79.255.255.255</endAddress>
<description>Allocated to RIPE NCC</description>
<type>RN</type>
<startAddress>79.0.0.0</startAddress>
</netBlock>
</netBlocks>
<orgRef name="RIPE Network Coordination Centre" handle="RIPE">http://whois.arin.net/rest/org/RIPE</orgRef>
<comment>
<line number="0">These addresses have been further assigned to users in</line>
<line number="1">the RIPE NCC region. Contact information can be found in</line>
<line number="2">the RIPE database at http://www.ripe.net/whois</line>
</comment>
<startAddress>79.0.0.0</startAddress>
<updateDate>2009-05-18T07:34:02-04:00</updateDate>
<version>4</version>
</net>
好的,这对人类消费很有用,但对机器没用。如果我想要特定元素,比如说xml中的起始和结束IP地址,我可以输入:
ns = myXmlTree.nsmap.values()[0]
myXmlTree.findall("{" + ns + "}startAddress")[0].text
myXmlTree.findall("{" + ns + "}endAddress")[0].text
我会收到:
'79.0.0.0'
'79.255.255.255'
但是我仍然需要将xml文件看作是一个人来知道那些元素。相反,我希望能够检索特定级别的所有元素的名称,然后自动遍历该级别。所以,举例来说,我想做点什么:
myElements = myXmlTree.findallelements("{" + ns + "}")
它会给我一个返回值,如:
['registrationDate', 'ref', 'endAddress', 'handle', 'name', 'netBlocks', 'orgRef', 'comment', 'startAddress', 'updateDate', 'version']
如果可以告诉我整个元素结构,包括嵌套元素,那就太棒了。
我确定有办法,否则就没有意义了。
提前致谢!!
P.S。,我知道我可以迭代并浏览所有迭代的列表。我希望lxml中已经存在一个包含这些数据的方法。如果迭代是唯一的方法,我猜这没关系......它对我来说似乎很笨拙。
答案 0 :(得分:4)
我相信您正在寻找element.xpath()
。
XPath不是lxml
引入的概念,而是一种通用查询语言,用于从许多处理XML的事物支持的XML文档中选择节点。可以把它想象成与CSS选择器类似的东西,但功能更强大(也有点复杂)。请参阅XPath Syntax。
您的文档使用命名空间 - 我现在将忽略它并在帖子的末尾解释如何处理它们,因为它使示例更具可读性。 (但它们不会按原样用于您的文档。)
所以,例如,
tree.xpath('/net/endAddress')
将在<endAddress>79.255.255.255</endAddress>
节点下方直接选择<net />
元素。但不是<endAddress />
内的<netBlock>
。
XPath表达式
tree.xpath('//endAddress')
但是会在文档中的任何位置选择所有<endAddress />
个节点。
您当然可以使用XPath epxressions进一步查询您获得的节点:
netblocks = tree.xpath('/net/netBlocks/netBlock')
for netblock in netblocks:
start = netblock.xpath('./startAddress/text()')[0]
end = netblock.xpath('./endAddress/text()')[0]
print "%s - %s" % (start, end)
会给你
79.0.0.0 - 79.255.255.255
请注意,.xpath()
始终会返回所选节点的列表 - 因此,如果您只想要一个节点,请注明该节点。
您还可以按属性选择元素:
comment = tree.xpath('/net/comment')[0]
line_2 = comment.xpath("./line[@number='2']")[0]
这会从第一条评论中选择带有<line />
的{{1}}元素。
您也可以自己选择属性:
number="2"
要获取您最后询问的元素名称列表,您可以执行以下操作:
numbers = tree.xpath('//line/attribute::number')
['0', '1', '2']
但鉴于XPath的强大功能,最好只查询文档中您想要了解的内容,具体或松散,如您认为合适。
现在,名称空间。正如您所注意到的,如果您的文档使用XML命名空间,则需要在许多地方考虑这一点,并且XPath也不例外。查询命名空间文档时,将names = [node.tag for node in tree.xpath('/net/*')]
['registrationDate', 'ref', 'endAddress', 'handle', 'name', 'netBlocks', 'orgRef', 'comment', 'startAddress', 'updateDate', 'version']
方法传递给命名空间映射,如下所示:
xpath()
在NSMAP = {'ns': 'http://www.arin.net/whoisrws/core/v1',
'ns2': 'http://www.arin.net/whoisrws/rdns/v1',
'ns3': 'http://www.arin.net/whoisrws/netref/v2'}
names = [node.tag for node in tree.xpath('/ns:net/*', namespaces=NSMAP)]
中的许多其他位置,您可以使用lxml
作为命名空间映射中的字典键来设置默认命名空间。不幸的是,None
不会引发异常
xpath()
因此,您不得不为XPath表达式中的每个节点名称添加前缀TypeError: empty namespace prefix is not supported in XPath
(或者您选择将该命名空间映射到的任何地址)。
有关XPath语法的详细信息,请参阅XPath Syntax中的W3Schools Xpath Tutorial页面。
要开始使用XPath,在许多XPath testers之一中摆弄文档也非常有用。此外,Firefox的Firebug插件或Google Chrome检查器允许您显示所选元素的(或更确切地说,多个)XPath。