R - 用rvest包刮痧

时间:2018-05-03 03:07:51

标签: r xml web-scraping rvest

我正在尝试从此网页上的“团队统计信息”表中获取数据:

https://www.hockey-reference.com/teams/CGY/2010.html

我没有很多关于网页抓取的经验,但是已经尝试过使用XML包,现在使用rvest包:

library(rvest)

url <- html("https://www.hockey-reference.com/teams/CGY/2010.html")

url %>%
        html_node(xpath = "//*[@id='team_stats']") 

最终看似单个节点:

{xml_node}
<table class="sortable stats_table" id="team_stats" data-cols-to-freeze="1">
[1] <caption>Team Statistics Table</caption>
[2] <colgroup>\n<col>\n<col>\n<col>\n<col>\n<col>\n<col>\n<col>\ ...
[3] <thead><tr>\n<th aria-label="Team" data-stat="team_name" sco ...
[4] <tbody>\n<tr>\n<th scope="row" class="left " data-stat="team ...

如何解析这个以获取两行表中的标题和信息?

1 个答案:

答案 0 :(得分:2)

您只需在链的末尾添加html_table

library(rvest)

url <- read_html("https://www.hockey-reference.com/teams/CGY/2010.html")

url %>%
  html_node(xpath = "//*[@id='team_stats']") %>% 
  html_table()

可替换地:

library(rvest)

url %>%  
  html_table() %>% 
  .[[1]]

两种解决方案都返回:

            Team AvAge GP  W  L OL PTS  PTS%  GF  GA   SRS  SOS TG/G PP PPO   PP% PPA PPOA   PK% SH SHA    S  S%   SA   SV%   PDO
1 Calgary Flames  28.8 82 40 32 10  90 0.549 201 203 -0.03 0.04 5.05 43 268 16.04  54  305 82.30  7   1 2350 8.6 2367 0.916 100.1
2 League Average  27.9 82 41 31 10  92 0.561 233 233  0.00 0.00 5.68 56 304 18.23  56  304 81.77  6   6 2486 9.1 2479 0.911    NA