我的目标是将group_old重新编码为group_desired:
group_old <- c(58,58,57,57,57,56,56,56,59,59,56)
group_desired <- c(1,1,2,2,2,3,3,3,4,4,3)
df <- data.frame(group_old, group_desired)
> df
group_old group_desired
1 58 1
2 58 1
3 57 2
4 57 2
5 57 2
6 56 3
7 56 3
8 56 3
9 59 4
10 59 4
11 56 3
我能够做到:
codex <- data.frame(old = unique(df$group_old), new = 1:length(unique(df$group_old)))
df$group_new <- sapply(df$group_old, FUN = function(x) codex$new[codex$old == x] )
> df
group_old group_desired group_new
1 58 1 1
2 58 1 1
3 57 2 2
4 57 2 2
5 57 2 2
6 56 3 3
7 56 3 3
8 56 3 3
9 59 4 4
10 59 4 4
11 56 3 3
但是,此代码在具有8百万个obs和400k组的数据集上运行速度非常慢。是否有更有效的方法来完成大数据的相同操作?
答案 0 :(得分:3)
使用data.table
:
我们按group_old
分组,然后按引用创建新列。 .GRP
是data.table
中的特殊符号。它是一个简单的分组计数器。它将1分配给第一组,2分配给第二组......依此类推
group_old <- c(58,58,57,57,57,56,56,56,59,59,56)
df <- data.frame(group_old = group_old)
library(data.table)
setDT(df)[,group_desired := .GRP, by = group_old]
# group_old group_desired
#1: 58 1
#2: 58 1
#3: 57 2
#4: 57 2
#5: 57 2
#6: 56 3
#7: 56 3
#8: 56 3
#9: 59 4
#10: 59 4
#11: 56 3
或使用dplyr
:
df$group_desired <- group_indices(df, group_old)
要获得与上述类似的结果,我们首先定义group_old
的因子级别:
df$group_old <- factor(df$group_old, levels = unique(df$group_old))
df$group_desired <- group_indices(df, group_old)
注意:group_indices
根据升序(如果是数字)或因子级别(如果使用的变量是因子)分配组号。
答案 1 :(得分:1)
我不确定性能,但你可以尝试从新版本的dplyr包中重新编码:
df$group_desired <-
dplyr::recode(df$group_old, `58` = 1, `57` = 2, `56` = 3, `59` = 4)
答案 2 :(得分:0)
更通用的data.table方法。
library(data.table)
dt1 <- data.table(old = LETTERS[1:6], new = 1:6)
set.seed(1234)
dt2 <- data.table(old = sample(LETTERS[1:6], 6, replace = TRUE))
setkey(dt1, old)
setkey(dt2, old)
dt2[dt1]
# old new
# 1: A 1
# 2: B 2
# 3: C 3
# 4: D 4
# 5: D 4
# 6: D 4
# 7: D 4
# 8: E 5
# 9: F 6
答案 3 :(得分:0)
我发现了另一种比我原来快一点的Base R方式:
df <- within(df, { group_new <- as.numeric(as.factor(df$group_old)) } )
df <- within(df, { group_new <- match(group_new, unique(group_new)) } )