Question

当我在网站上抓取元素时，我的代码没有返回任何内容。我之前已成功抓取此网站上的表格。但是，我似乎无法从这些＆＃34;动态表中提取代码＆＃34;在fantasy.premierleague.com上。

http://i.imgur.com/cHkFwHE.png ＆lt;我试图提取的图片。

此外，我的登录详细信息在代码中合法显示，因此您可以使用我的凭据登录并亲自查看正在进行的操作。（显示它是一个备用的模拟账户）。

public class StatsCollector {

public static void main (String [] args){


    try {

         String url = "https://users.premierleague.com/PremierUser/j_spring_security_check";

            Response res = Jsoup
                    .connect(url)
                    .followRedirects(false)
                    .timeout(2_000)
                    .data("j_username", "<fantasyfootball123@guerrillamail.com>")
                    .data("j_password", "<fantasy123>")
                    .method(Method.POST)
                    .execute();

            Map<String, String> loginCookies = res.cookies();


         String url1 = "http://fantasy.premierleague.com/stats/elements/?page=1" ;

            Document doc = Jsoup.connect
                    (url1)
                    .cookies(loginCookies)
                    .get();

            for (Element table: doc.select("table.ismEiwMatchesPast")) {
                for (Element tbody: table.select("tbody.ismHistoryPastSeasons")) {
                    for (Element row: table.select("tr")){
                        Elements tds = row.select("td");
                        if (tds.size()>2){
                            System.out.println(tds.get(0).text() + " : " + tds.get(1).text() + " : " + tds.get(2).text());
                            }
                        }
                }
            }



    }

    catch (IOException ex) {
        Logger.getLogger(StatsCollector.class.getName()).log(Level.SEVERE,null,ex);
    }





}

}

Answer 1

内容是动态创建的，您也可以使用selenium来获取＆＃34;获取＆＃34;要获取所请求的数据，您就可以解析它（使用Jsoup或其他东西）。

发现难以从表中提取数据（JSoup）

1 个答案: