为什么'错误:长度(网址)== 1不是真的'与rvest web scraping

时间:2015-03-17 03:10:03

标签: r web-scraping rvest

我试图废弃网页数据,但第一步需要登录。我已成功登录其他网站,但我在本网站上发现了一个奇怪的错误。

library("rvest")
library("magrittr")    

research <- html_session("https://www.fitchratings.com/")

signin <- research %>%
  html_nodes("form") %>%
  extract2(1) %>%
  html_form() %>%
  set_values (
    'userName' = "abc",
    'password' = "1234"
     )

research <- research %>%
  submit_form(signin)

当我运行&#39; submit_form&#39;我遇到以下错误:

> research <- research %>%
+ submit_form(signin)
Submitting with '<unnamed>'
Error: length(url) == 1 is not TRUE

使用未命名提交是正确的b / c没有为登录按钮分配名称。任何帮助表示赞赏!

1 个答案:

答案 0 :(得分:9)

我遇到了同样的问题。我跳了几圈就得到了rvest的开发版本,现在它正在顺利运行。这就是我如何去做的事情:

首先是第一件事。您需要安装RTools。确保R已关闭。这可以在这里找到:https://cran.r-project.org/bin/windows/Rtools/。 有关安装Rtools的信息可以在这里找到(如果你正在使用Windows):github.com/stan-dev/rstan/wiki/Install-Rtools-for-Windows

启动R,然后安装库&#34; httr&#34;和&#34; Rcpp&#34;如果你还没有。

安装&#34; devtools&#34;和相关的github安装程序。可以找到here信息,但我会从链接的回购邮件中快速总结一下。

视窗:

install.packages("devtools")
library(devtools)
build_github_devtools()

#### Restart R before continuing ####
install.packages("devtools.zip", repos = NULL, type = "source")

# Remove the package after installation
unlink("devtools.zip")

Mac / Linux中

devtools::install_github("hadley/devtools")

现在,执行最后的步骤。

library(httr)
library(Rcpp)
library(devtools)
install_github("hadley/rvest")

您现在应该能够运行submit_form(session, form)而不会遇到错误

Submitting with 'xxxx'
Error: length(url) == 1 is not TRUE