重新编码组的更有效方法?

时间:2016-08-05 22:38:03

标签: r

我的目标是将group_ol​​d重新编码为group_desired:

group_old <- c(58,58,57,57,57,56,56,56,59,59,56)
group_desired <- c(1,1,2,2,2,3,3,3,4,4,3)
df <- data.frame(group_old, group_desired)

> df
   group_old group_desired
1         58             1
2         58             1
3         57             2
4         57             2
5         57             2
6         56             3
7         56             3
8         56             3
9         59             4
10        59             4
11        56             3

我能够做到:

codex <- data.frame(old = unique(df$group_old), new = 1:length(unique(df$group_old)))

df$group_new <- sapply(df$group_old, FUN = function(x) codex$new[codex$old == x] )

> df
   group_old group_desired group_new
1         58             1         1
2         58             1         1
3         57             2         2
4         57             2         2
5         57             2         2
6         56             3         3
7         56             3         3
8         56             3         3
9         59             4         4
10        59             4         4
11        56             3         3

但是,此代码在具有8百万个obs和400k组的数据集上运行速度非常慢。是否有更有效的方法来完成大数据的相同操作?

4 个答案:

答案 0 :(得分:3)

使用data.table

我们按group_old分组,然后按引用创建新列。 .GRPdata.table中的特殊符号。它是一个简单的分组计数器。它将1分配给第一组,2分配给第二组......依此类推

group_old <- c(58,58,57,57,57,56,56,56,59,59,56)
df <- data.frame(group_old = group_old)

library(data.table)
setDT(df)[,group_desired := .GRP, by = group_old]

 #   group_old group_desired
 #1:        58             1
 #2:        58             1
 #3:        57             2
 #4:        57             2
 #5:        57             2
 #6:        56             3
 #7:        56             3
 #8:        56             3
 #9:        59             4
#10:        59             4
#11:        56             3

或使用dplyr

df$group_desired <- group_indices(df, group_old)

要获得与上述类似的结果,我们首先定义group_old的因子级别:

df$group_old <- factor(df$group_old, levels = unique(df$group_old))
df$group_desired <- group_indices(df, group_old)

注意group_indices根据升序(如果是数字)或因子级别(如果使用的变量是因子)分配组号。

答案 1 :(得分:1)

我不确定性能,但你可以尝试从新版本的dplyr包中重新编码:

df$group_desired <-
  dplyr::recode(df$group_old, `58` = 1, `57` = 2, `56` = 3, `59` = 4)

答案 2 :(得分:0)

更通用的data.table方法。

library(data.table)
dt1 <- data.table(old = LETTERS[1:6], new = 1:6)

set.seed(1234)
dt2 <- data.table(old = sample(LETTERS[1:6], 6, replace = TRUE))

setkey(dt1, old)
setkey(dt2, old)

dt2[dt1]
#    old new
# 1:   A   1
# 2:   B   2
# 3:   C   3
# 4:   D   4
# 5:   D   4
# 6:   D   4
# 7:   D   4
# 8:   E   5
# 9:   F   6

答案 3 :(得分:0)

我发现了另一种比我原来快一点的Base R方式:

df <- within(df, { group_new <- as.numeric(as.factor(df$group_old)) }  )
df <- within(df, { group_new <- match(group_new, unique(group_new)) }  )