使用Jaunt Library进行Java Web Scraping

时间:2014-12-10 11:53:32

标签: java web-scraping jaunt-api

我遇到了Java Web抓取问题。这是网站:(http://www.bbc.com/sport/football/teams/liverpool

从这里开始,我希望获得头条新闻数据。

注意:我使用的是Jaunt Library。

public class News extends JFrame
{
    private String title;
    private JLabel labelText2;

    News()
    {

        setSize(800, 200);
        setDefaultCloseOperation(JFrame.EXIT_ON_CLOSE);
        labelText2 = new JLabel();
        setLayout(null);
        labelText2.setBounds(10, 10, 550, 20);
        add(labelText2);
    }

    public void Club_News()
    {
        try {

            UserAgent userAgent = new UserAgent();
            userAgent.visit("http://www.bbc.com/sport/football/teams/liverpool");
            String div = userAgent.doc.findFirst(
                    "<div id=\"more-headlines\" class=\"mod mod-separator\">").innerHTML();
            labelText2.setText("Latest News Headlines: " + div);
        } catch (JauntException e) {
            System.err.println(e);
        }
    }
}

1 个答案:

答案 0 :(得分:1)

您需要调用Club_News()方法。您可以将它作为构造函数中的最后一个语句:

add(labelText2); // existing last line
Club_News(); // new method call

要明显出错,请在catch末尾的Club_News()块添加一行:

System.err.println(e); // existing error handling
labelText2.setText(e.toString()); // new hint