使用BeautifulSoup在两个节点之间提取兄弟节点

时间:2010-03-24 11:46:00

标签: python beautifulsoup

我有一份这样的文件:

<p class="top">I don't want this</p>

<p>I want this</p>
<table>
   <!-- ... -->
</table>

<img ... />

<p> and all that stuff too</p>

<p class="end>But not this and nothing after it</p>

我想提取p [class = top]和p [class = end]段落之间的所有内容。

使用BeautifulSoup有什么好办法吗?

1 个答案:

答案 0 :(得分:8)

node.nextSibling属性是您的解决方案:

from BeautifulSoup import BeautifulSoup

soup = BeautifulSoup(html)

nextNode = soup.find('p', {'class': 'top'})
while True:
    # process
    nextNode = nextNode.nextSibling
    if getattr(nextNode, 'name', None)  == 'p' and nextNode.get('class', None) == 'end':
        break

这个复杂的条件是确保您正在访问HTML标记的属性而不是字符串节点。