我想告诉json解析器其中一列应该是POSIXct。当解析器丢失时间信息时,如何做到这一点。
library(rvest)
library(jsonlite)
url = "http://www.cmegroup.com/CmeWS/mvc/Settlements/Futures/Settlements/5081/FUT?tradeDate=04/06/2018&strategy=DEFAULT&pageSize=500"
strJson <- html_text(read_html(url))
json <- map(strJson, ~fromJSON(.))
mData <- as.matrix(as.data.frame(json))
dat <- as.POSIXct(mData[,10], format='%H:%M:%S %d %b %Y')
所有dat
都是NA
答案 0 :(得分:1)
问题可能是区域设置LC_TIME
。我的设置为de_DE.UTF-8
,因此无法解析字符串,因为%p
等特定于语言环境的选项。使用Sys.getlocale("LC_TIME")
检查您的语言区域。
将其更改为英语版本可以胜任:
library(rvest)
library(jsonlite)
url = "http://www.cmegroup.com/CmeWS/mvc/Settlements/Futures/Settlements/5081/FUT?tradeDate=04/06/2018&strategy=DEFAULT&pageSize=500"
strJson <- html_text(read_html(url))
json <- map(strJson, ~fromJSON(.))
mData <- as.data.frame(json, stringsAsFactors = F)
Sys.setlocale("LC_TIME", "en_GB.UTF-8")
dat <- as.POSIXct(mData$updateTime, format='%A, %d %b %Y %I:%M %p')
head(dat)
[1] "2018-04-06 22:33:00 CEST" "2018-04-06 22:33:00 CEST" "2018-04-06 22:33:00 CEST" "2018-04-06 22:33:00 CEST"
[5] "2018-04-06 22:33:00 CEST" "2018-04-06 22:33:00 CEST"
答案 1 :(得分:1)
没有回答,因为Martin对于特定的排名而言非常简洁(但是,如果让你感觉更好的话,就会邀请学生进行投票)
仅提供备用数据采集和转换工作流程的建议:
src_url <- "http://www.cmegroup.com/CmeWS/mvc/Settlements/Futures/Settlements/5081/FUT?tradeDate=04/06/2018&strategy=DEFAULT&pageSize=500"
x <- jsonlite::fromJSON(src_url)
x$settlements <- list(x$settlements)
tidyr::unnest(tibble::as_data_frame(x))
## # A tibble: 58 x 14
## updateTime dsHeader reportType tradeDate empty month open high low last change settle volume openInterest
## <chr> <chr> <chr> <chr> <lgl> <chr> <chr> <chr> <chr> <chr> <chr> <chr> <chr> <chr>
## 1 Friday, 06… Dated B… Final 04/06/20… FALSE APR … - - - - -1.02 66.81 0 75
## 2 Friday, 06… Dated B… Final 04/06/20… FALSE MAY … - - - - -1.24 66.84 0 75
## 3 Friday, 06… Dated B… Final 04/06/20… FALSE JUN … - - - - -1.24 66.37 0 75
## 4 Friday, 06… Dated B… Final 04/06/20… FALSE JLY … - - - - -1.25 65.95 0 75
## 5 Friday, 06… Dated B… Final 04/06/20… FALSE AUG … - - - - -1.24 65.56 0 0
## 6 Friday, 06… Dated B… Final 04/06/20… FALSE SEP … - - - - -1.24 65.19 0 0
## 7 Friday, 06… Dated B… Final 04/06/20… FALSE OCT … - - - - -1.25 64.78 0 0
## 8 Friday, 06… Dated B… Final 04/06/20… FALSE NOV … - - - - -1.24 64.46 0 0
## 9 Friday, 06… Dated B… Final 04/06/20… FALSE DEC … - - - - -1.22 64.15 0 0
## 10 Friday, 06… Dated B… Final 04/06/20… FALSE JAN … - - - - -1.20 63.82 0 0
## # ... with 48 more rows
答案 2 :(得分:0)
确保将library(purrr)
以及map()
作为该软件包中的函数。
该列作为因子导入。它需要先改变角色。
cdat <- as.character(mData[,10]))
之后,您发布的格式不等于数据格式。您需要完全按照数据说明解析它。
dat <- as.POSIXct(cdat, format = '%A, %d %b %Y %H:%M %p', tz = 'UTC')
# [1] "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC"
# [6] "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC" "2018-04-06 10:33:00 UTC"
#...
或者在一行中:
dat <- as.POSIXct(as.character(mData[,10]), format = '%A, %d %b %Y %H:%M %p', tz = 'UTC')