用rvest刮掉选定的Drop Down项目的文本

时间:2016-02-17 15:34:32

标签: css r web-scraping rvest

我正在使用 Rselenium rvest 抓取一些网站。因此,我循环浏览下拉菜单中的项目以更改javascript表。 下拉菜单中的表名应成为已删除表中的标识符列。我设法刮掉了桌子,但是当我只抓一个选定的菜单条目时我就陷入了困境。 以下是html代码的一些行:

<select>
<option value="5823">2010/2011</option>
<option value="7094">2011/2012</option>
<option value="9024">2012/2013</option>
<option value="11976">2013/2014</option>
<option value="15388">2014/2015</option>
<option value="18336" selected="selected">2015/2016</option>
</select>

如何获取所选列的html_text? css选择器:已检查无效。 我试过了:

 html_nodes("option") %>% html_attrs()

哪个正确地给了我:

 [[1]]
 value 
"5823" 

[[2]]
 value 
"7094" 

[[3]]
 value 
"9024" 

[[4]]
  value 
"11976" 

[[5]]
  value 
"15388" 

[[6]]
  selected      value 
"selected"    "18336" 

read_html(wData) %>% html_nodes("option") %>% html_text()
[1] "2010/2011" "2011/2012" "2012/2013" "2013/2014" "2014/2015" "2015/2016"

但我不知道如何将两者结合在一起。我只得到:

[1] "2015/2016"

由于我正在循环选择,我需要一个通用的解决方案。 感谢。

1 个答案:

答案 0 :(得分:5)

您可以使用xpath选择器而不是css选择器。

read_html(wData) %>% html_nodes(xpath="//option[@selected]")  %>% html_text()

即使:checked css伪类不起作用,也可以搜索属性。