使用BeautifulSoup获取下一个UL元素

时间:2013-04-03 18:55:37

标签: python beautifulsoup

我正在尝试在给定网页中找到下一个ul元素。

我首先将我的回复插入到Beautiful Soup中,如下所示:

soup = BeautifulSoup(response.context)

打印出response.context给出以下内容

print(response.context)
<!DOCTYPE html>
<html>
    <head>
        <title> | FollowUp</title>
        <meta name='viewport' content='width=device-width, initial-scale=1.0'>
        <link href='/static/css/bootstrap.min.css' rel='stylesheet' media='screen'>
    </head>

    <body>
        <div class='navbar'>
            <div class='navbar-inner'>
                <a class='brand' href='/'>TellMe.cat</a>
                <ul class='nav'>
                    <li><a href='list'>My Stories</a></li>
                    <li><a href='add'>Add Story</a></li>
                    <li><a href='respond'>Add Update</a></li>
                </ul>

                <form class='navbar-form pull-right' action='process_logout' method='post'>
                    <input type='hidden' name='csrfmiddlewaretoken' value='RxquwEsaS5Bn1MsKOIJP8uLtRZ9yDusH' />
                    Hello add!
                    <button class='btn btn-small'>Logout</button>
                </form>

            </div>
        </div>

        <div class='container'>

<ul id='items'>
<ul>
<li><a href='http://www.example.org'>http://www.example.org</a></li>
<ul>
<p>There have been no follow ups.</p>
</ul>
</ul>
</ul>

        </div>

        <script src="//ajax.googleapis.com/ajax/libs/jquery/1.9.1/jquery.min.js"></script>
        <script src='/static/js/bootstrap.min.js'></script>

    </body>
</html>

我正在尝试获取名为'items'的ul。我这样做:

items = soup.find(id='items')

这给了我正确的ul及其所有孩子。但是打电话

items.find_next('ul')

给出错误

TypeError: 'NoneType' object is not callable

即使这似乎是应该如何被称为美丽的汤文档:https://beautiful-soup-4.readthedocs.org/en/latest/#find-all-next-and-find-next

我做错了什么?

1 个答案:

答案 0 :(得分:2)

制作一个virtualenvpip install BeautifulSoup requests,打开python控制台。

import BeautifulSoup
import requests

html = requests.get("http://yahoo.com").text
b = BeautifulSoup.BeautifulSoup(html)
m = b.find(id='masthead')
item = m.findNext('ul')

dir(m)告诉您m上的功能。你可以看到你想要findNext

你也可能会发现ipython是一个更宽容的shell来运行python。你可以输入一个变量的名称并点击Tab来查看成员变量。