Beautifulsoup无法通过文字找到标签

时间:2015-05-12 16:25:40

标签: python web-scraping beautifulsoup

Beautifulsoup突然无法通过文字找到标签。

我有一个显示此标记的html:

<span class="date">Telefon: <b>+421 902 808 344</b></span>

BS4无法找到此标记:

telephone = soup.find('span',{'text':re.compile('.*Telefon.*')})
print telephone

>>> None

我尝试了很多方法,比如

find('span',text='Telefon: ')find('span', text=re.compile('Telefon: .*')

但没有任何作用。我已尝试将html.parser更改为lxml

可能有什么问题?

1 个答案:

答案 0 :(得分:4)

BeautifulSoup将字符串Telefon:视为span标记内的bs4.element.NavigableString。所以你可以用

找到它
import bs4
import re

soup = bs4.BeautifulSoup('<span class="date">Telefon: <b>+421 902 808 344</b></span>')
for span in soup.find_all('span', {'class':"date"}):
    if span.find(text=re.compile('Telefon:')):
        for text in span.stripped_strings:
            print(text)
# Telefon:
# +421 902 808 344

或者,您可以直接使用lxml:

import lxml.html as LH

root = LH.fromstring('<span class="date">Telefon: <b>+421 902 808 344</b></span>')

for span in root.xpath('//span[@class="date" and contains(text(), "Telefon:")]'):
    print(span.text_content())
    # Telefon: +421 902 808 344