R中的分组变量Deciles

时间:2017-02-10 06:29:34

标签: r data.table dplyr lapply purrr

我想找出每个分组变量的十分位数。我专门寻找使用dplyrlapply的方法。如果你能帮助我,我会很感激。

这是我尝试的内容。除了致电dplyr::ntile()(这对我来说没有用)之外,我不知道如何直接拉十分位数

尝试1

以下是我在describe()包中使用Hmisc尝试的内容:

set.seed(10)
IData <- data.frame(let = sample( x = LETTERS, size = 10000, replace=TRUE), numbers = sample(x = c(1:20000),size = 10000))

Output<-IData %>% data.table::as.data.table(.) %>% split(.,by=c("let"),drop = TRUE,sorted = TRUE) %>% purrr::map(~describe(.$numbers))

这肯定有帮助,但上面的代码存在两个问题:

a)输出(甚至列表格式)不是我要找的东西。

b)我真的不知道如何从上面的列表中提取5%,10%....

底线是我被困了

尝试2

我尝试用describe替换ntile,但是下面的代码给了我一个对我没有意义的输出,因为列的数量不是10。运行时Output[[1]],我看到一个〜400个数字的向量而不是10个。

Output<-IData %>% data.table::as.data.table(.) %>% split(.,by=c("let"),drop = TRUE,sorted = TRUE) %>% purrr::map(~dplyr::ntile(.$numbers,10))

尝试3 = 预期输出

最后,我尝试去旧学校(即复制粘贴)以获得预期的输出:

Output<-IData %>%
  dplyr::group_by(let) %>%
  dplyr::summarise( QQuantile1 = quantile(`numbers`, c(.10)),
                    QQuantile1 = quantile(`numbers`, c(.10)),
                    QQuantile2 = quantile(`numbers`, c(.20)),
                    QQuantile3 = quantile(`numbers`, c(.30)),
                    QQuantile4 = quantile(`numbers`, c(.40)),
                    QQuantile5 = quantile(`numbers`, c(.50)),
                    QQuantile6 = quantile(`numbers`, c(.60)),
                    QQuantile7 = quantile(`numbers`, c(.70)),
                    QQuantile8 = quantile(`numbers`, c(.80)),
                    QQuantile9 = quantile(`numbers`, c(.90)),
                    QQuantile10 = quantile(`numbers`, c(.100)))

问题:有人可以帮助我使用这三个(不是一个,但最好是所有学习方法)来生成以上输出

1)lapply

2)dplyr

3)data.table

我在SO上查看了几个主题,但是他们都讨论了特定的分位数,而不是全部。例如。 Find top deciles from dataframe by group线程。

2 个答案:

答案 0 :(得分:5)

我们可以使用data.table以紧凑的方式完成此操作。将'data.frame'转换为'data.table'(setDT(IData)),按'let'分组,获取'{1}}'数字'并将其转换为quantile({{ 1}})

list

答案 1 :(得分:5)

要将我的评论汇总到答案中,基础非常简单:

aggregate(numbers ~ let, IData, quantile, seq(0.1, 1, 0.1))

##    let numbers.10% numbers.20% numbers.30% numbers.40% numbers.50% numbers.60% numbers.70% numbers.80% ...
## 1    A      1749.8      3847.8      5562.6      7475.2      9926.0     11758.6     13230.6     15788.8
## 2    B      2393.5      4483.6      6359.1      7708.0      9773.0     11842.8     13468.9     16266.4
## 3    C      2041.5      3682.0      5677.5      7504.0      9226.0     11470.0     13628.5     15379.0
## 4    D      1890.7      4086.8      5661.9      7526.6      9714.0     11438.8     13969.2     15967.2
## 5    E      2083.6      4107.0      6179.8      7910.8     10095.0     11692.6     13668.0     15570.2
## 6    F      1936.6      4220.2      6197.0      8791.8     10382.0     12266.4     14589.2     16407.0
## 7    G      3059.4      4884.2      6519.6      8530.0     10481.0     12469.0     14401.6     16127.8
## 8    H      2186.5      4081.0      5801.5      7206.0      9256.5     11453.0     13692.0     15471.0
## 9    I      1534.1      3793.2      5822.2      7621.4      9417.5     11737.0     14191.2     15722.4
## 10   J      1967.2      4286.6      5829.6      7664.6     10606.0     12217.4     14422.2     16628.0
## ...

警告numbers实际上是一个嵌套列,可能需要解压缩以供进一步使用。

如果您使用列表列或dplyr并重新整形:

,则

do有效

library(tidyverse)

IData %>% group_by(let) %>% 
    summarise(quant_prob = list(paste0('quant', seq(.1, 1, .1))), 
              quant_value = list(quantile(numbers, seq(.1, 1, .1)))) %>% 
    unnest() %>% 
    spread(quant_prob, quant_value)

## # A tibble: 26 × 11
##       let quant0.1 quant0.2 quant0.3 quant0.4 quant0.5 quant0.6 quant0.7 quant0.8 quant0.9 quant1
## *  <fctr>    <dbl>    <dbl>    <dbl>    <dbl>    <dbl>    <dbl>    <dbl>    <dbl>    <dbl>  <dbl>
## 1       A   1749.8   3847.8   5562.6   7475.2   9926.0  11758.6  13230.6  15788.8  17763.0  19958
## 2       B   2393.5   4483.6   6359.1   7708.0   9773.0  11842.8  13468.9  16266.4  17877.4  19929
## 3       C   2041.5   3682.0   5677.5   7504.0   9226.0  11470.0  13628.5  15379.0  17265.0  19876
## 4       D   1890.7   4086.8   5661.9   7526.6   9714.0  11438.8  13969.2  15967.2  17961.0  19989
## 5       E   2083.6   4107.0   6179.8   7910.8  10095.0  11692.6  13668.0  15570.2  18011.4  19887
## 6       F   1936.6   4220.2   6197.0   8791.8  10382.0  12266.4  14589.2  16407.0  18345.0  19997
## 7       G   3059.4   4884.2   6519.6   8530.0  10481.0  12469.0  14401.6  16127.8  18219.2  19922
## 8       H   2186.5   4081.0   5801.5   7206.0   9256.5  11453.0  13692.0  15471.0  17331.0  19996
## 9       I   1534.1   3793.2   5822.2   7621.4   9417.5  11737.0  14191.2  15722.4  17706.6  19965
## 10      J   1967.2   4286.6   5829.6   7664.6  10606.0  12217.4  14422.2  16628.0  18091.2  19901
## # ... with 16 more rows

另一个有趣的选项是purrrlyr::by_slice,可让您将结果收集到列中:

IData %>% group_by(let) %>% 
    by_slice(~quantile(.x$numbers, seq(0.1, 1, 0.1)), .collate = "cols")

## # A tibble: 26 × 11
##       let  .out1  .out2  .out3  .out4   .out5   .out6   .out7   .out8   .out9 .out10
##    <fctr>  <dbl>  <dbl>  <dbl>  <dbl>   <dbl>   <dbl>   <dbl>   <dbl>   <dbl>  <dbl>
## 1       A 1749.8 3847.8 5562.6 7475.2  9926.0 11758.6 13230.6 15788.8 17763.0  19958
## 2       B 2393.5 4483.6 6359.1 7708.0  9773.0 11842.8 13468.9 16266.4 17877.4  19929
## 3       C 2041.5 3682.0 5677.5 7504.0  9226.0 11470.0 13628.5 15379.0 17265.0  19876
## 4       D 1890.7 4086.8 5661.9 7526.6  9714.0 11438.8 13969.2 15967.2 17961.0  19989
## 5       E 2083.6 4107.0 6179.8 7910.8 10095.0 11692.6 13668.0 15570.2 18011.4  19887
## 6       F 1936.6 4220.2 6197.0 8791.8 10382.0 12266.4 14589.2 16407.0 18345.0  19997
## 7       G 3059.4 4884.2 6519.6 8530.0 10481.0 12469.0 14401.6 16127.8 18219.2  19922
## 8       H 2186.5 4081.0 5801.5 7206.0  9256.5 11453.0 13692.0 15471.0 17331.0  19996
## 9       I 1534.1 3793.2 5822.2 7621.4  9417.5 11737.0 14191.2 15722.4 17706.6  19965
## 10      J 1967.2 4286.6 5829.6 7664.6 10606.0 12217.4 14422.2 16628.0 18091.2  19901
## # ... with 16 more rows

虽然列名有点​​糟糕。