使用JSoup从复杂表中解析值

时间:2013-11-11 15:44:42

标签: java web-scraping html-table jsoup html-parsing

我有一个包含以下html的表:

<TABLE class=data-table cellSpacing=0 cellPadding=0>
  <TBODY>
  <TR>
    <TD colSpan=4><A id=accounting name=accounting></A>
      <H3>Accounting</H3></TD></TR>
  <TR>
    <TH class=data-tablehd align=left>FORM NO.</TH>
    <TH class=data-tablehd align=left>TITLE</TH>
    <TH class=data-tablehd align=right>Microsoft</TH>
    <TH class=data-tablehd align=right>Acrobat</TH></TR>
  <TR>
    <TD><A id=1008ft name=1008ft>SF 1008-FT</A></TD>
    <TD>Work for Others Funding Transfer Between Projects for an Agreement</TD>
    <TD align=right><A 
      href="https://someurl1" 
      target=top>MS Word</A></TD>
    <TD align=right><A 
      href="https://someurl2" 
      target=top>PDF </A></TD></TR>
...

我需要解析<TR>数据,以获得类似

的内容
SF 1008-FT, Work for Others ... an Agreement, https://someurl1, https://someurl2

我尝试使用以下代码:

    URL formURL = new URL("http://urlToParse");
    Document doc = Jsoup.parse(formURL, 3000);

    Element table = doc.select("TABLE[class = data-table]").first();
    Iterator<Element> ite = table.select("td[colSpan=4]").iterator();

    while(ite.next() != null) {
        System.out.println(ite.next().text());
    }

然而,这只会返回“返回顶部”以及整个表格中的一些不同标题。

有人可以帮我写正确的JSoup代码来解析我需要的信息吗?

2 个答案:

答案 0 :(得分:3)

我没有时间去测试,但你可以使用这样的东西:

        Element table = doc.select("TABLE[class = data-table]").first();
        Elements rows = table.select("tr");

        for (Element td: rows.get(2).children()) {
            System.out.println(td.text());
        }

你得到了桌子第3排的孩子们。

答案 1 :(得分:1)

我发现解决方案对类似的线程进行了一些小修改。提供解决方案的代码如下:

for (Element table : doc.select("table")) {
        for (Element row : table.select("tr")) {
            Elements tds = row.select("td");
            formNumber = tds.get(0).text();
            title = tds.get(1).text();
            link1 = tds.get(2).select("a[href]").attr("href");
            link2 = tds.get(3).select("a[href]").attr("href");
            }
}