如何在Python中的<h1> </h1>之间提取文本?

时间:2014-08-26 03:07:55

标签: python html tags beautifulsoup extract

我在<h1></h1>之间提取文字。

请帮帮我。

我的代码是:

import bs4
import re
import urllib2

url2='http://www.flipkart.com/mobiles/pr?sid=tyy,4io&otracker=ch_vn_mobile_filter_Top%20Brands_All#jumpTo=0|20'
htmlf = urllib2.urlopen(url2)
soup = bs4.BeautifulSoup(htmlf)
#res=soup.findAll('div',attrs={'class':'product-unit'})
for res in soup.findAll('a',attrs={'class':'fk-display-block'}):
    suburl='http://www.flipkart.com/'+res.get('href')
    subhtml = urllib2.urlopen(suburl)
    subhtml = subhtml.read()
    subhtml = re.sub(r'\s\s+','',subhtml)
    subsoup=bs4.BeautifulSoup(subhtml)
    res2=subsoup.find('h1',attrs={'itemprop':'name'})
    if res2:
        print res2

输出:

<h1 itemprop="name">Moto G</h1>
<h1 itemprop="name">Moto E</h1>
<h1 itemprop="name">Moto E</h1>

但我想要这个:

Moto G
Moto E
Moto E

2 个答案:

答案 0 :(得分:5)

在任何HTML代码上,执行get_text()会提供与代码相关联的文本。所以,你只需要在res2上使用get_text()。即,

if res2:
    print res2.get_text()

PS :作为旁注,我认为您的代码中的这一行subhtml = re.sub(r'\s\s+','',subhtml)是一项昂贵的操作。如果你正在做的就是摆脱过多的空间,你可以这样做:

if res2:
    print res2.get_text().strip()

答案 1 :(得分:0)

你可以试试这个:

 res2=subsoup.find('h1',attrs={'itemprop':'name'})
    if res2:
        print res2.text

添加 res2.text 就可以了。