Python,BeautifulSoup - 解析推文

时间:2012-03-25 03:08:31

标签: python html parsing beautifulsoup

我从Twitter时间轴的来源获取了一些HTML,如下所示:

http://pastebin.com/deefvbYw

这是我将用于举例的一条推文。 我不能为我的生活得到它的合作。 我想要它显示:

Dmitri @TheFPShow “我一直这样做... youtube.com/watch?v=DF9WP8 ...”

如果有人能提供一些很棒的建议。

1 个答案:

答案 0 :(得分:1)

soup = BeautifulSoup(twit)

name_tag = soup('strong', {'class': 'fullname js-action-profile-name show-popup-with-id'})
user = name_tag[0].contents[0]

action_tag = soup('span', {'class': 'username js-action-profile-name'})
at_sign = action_tag[0].contents[0].contents[0]
show_name = action_tag[0].contents[1].contents[0]

twit_text = soup('p', {'class': 'js-tweet-text'})
message = twit_text[0].contents[0]
url = twit_text[0].contents[1]['data-expanded-url']

print user, at_sign, show_name, message, url

输出:

Dmitri @ TheFPShow I do this all the time...  http://www.youtube.com/watch?v=DF9WP87KNPk