test <- data.table(x=sample.int(10, 1000000, replace=TRUE))
y <- test$x
test[,.N, by=x] # fast
test[,.N, by=y] # extremely slow
为什么第二种情况会慢?
这样做更快:
test[,y:=y]
test[,.N, by=y]
test[,y:=NULL]
看起来好像很差?
答案 0 :(得分:2)
似乎我忘了更新这篇文章。
已修复
#5106
其中DT[, .N, by=y]
其中y
是带length(y) = nrow(DT)
的向量,但y
不是DT
中的列。感谢colinfang
报告。
require(data.table)
test <- data.table(x=sample.int(10, 1000000, replace=TRUE))
y <- test$x
system.time(ans1 <- test[,.N, by=x])
# user system elapsed
# 0.015 0.000 0.016
system.time(ans2 <- test[,.N, by=y])
# user system elapsed
# 0.015 0.000 0.015
setnames(ans2, "y", "x")
identical(ans1, ans2) # [1] TRUE