第二次使用dplyr :: do时丢失group_by信息

时间:2018-04-14 05:36:33

标签: r dplyr purrr

我在我的数据集的多个部分上运行多个模型,类似于(但有更多模型)

library(tidyverse)
d1 <- mtcars %>% 
  group_by(cyl) %>% 
  do(mod_linear = lm(mpg ~ disp + hp, data = ., x = TRUE))
d1 
# Source: local data frame [3 x 3]
# Groups: <by row>
# 
# # A tibble: 3 x 3
#     cyl mod_linear 
# * <dbl> <list>     
# 1    4. <S3: lm>   
# 2    6. <S3: lm>   
# 3    8. <S3: lm>   

然后我整理了这个tibble并使用扫描包中的tidy()保存我的参数估算值。

我还想计算预测变量的标准偏差(存储在上面的模型中,因为我设置x = TRUE)来创建,然后比较重新缩放的参数。我可以使用

来做前者
d1 %>%
  # group_by(cyl) %>% 
  do(term = colnames(.$mod$x),
     pred_sd = apply(X = .$mod$x, MARGIN = 2, FUN = sd)) %>%
  unnest()
# # A tibble: 9 x 2
#          term  pred_sd
#         <chr>    <dbl>
# 1 (Intercept)  0.00000
# 2        disp 26.87159
# 3          hp 20.93453
# 4 (Intercept)  0.00000
# 5        disp 41.56246
# 6          hp 24.26049
# 7 (Intercept)  0.00000
# 8        disp 67.77132
# 9          hp 50.97689

但是,结果不是分组的组合,所以我最终放弃了cyl列,告诉我哪个术语属于哪个模型。如何避免这种损失? - 再次添加group_by似乎会引发错误。

n.b。我想避免至少在第一部分使用purrr(拟合模型),因为我运行不同类型的模型,然后需要重塑结果(d1),我喜欢{{1}的进度条}。

n.b。我想使用模型的do组件而不是原始数据,因为它们具有正确比例的数据(我正在尝试不同的预测变换)

1 个答案:

答案 0 :(得分:4)

我们最初可以nest执行此操作,然后执行unnest

mtcars %>% 
    group_by(cyl) %>% 
      nest(-cyl) %>% 
      mutate(mod_linear = map(data, ~ lm(mpg ~ disp + hp, data = .x, x = TRUE)),
           term  = map(mod_linear, ~ names(coef(.x))),
           pred = map(mod_linear, ~ .x$x %>%
                                       as_tibble %>% 
                                       summarise_all(sd) %>% 
                                       unlist )) %>%
   select(-data, -mod_linear) %>%
     unnest
# A tibble: 9 x 3
#    cyl term         pred
#  <dbl> <chr>       <dbl>
#1  6.00 (Intercept)   0  
#2  6.00 disp         41.6
#3  6.00 hp           24.3
#4  4.00 (Intercept)   0  
#5  4.00 disp         26.9
#6  4.00 hp           20.9
#7  8.00 (Intercept)   0  
#8  8.00 disp         67.8
#9  8.00 hp           51.0

或者不是多次调用map,而是可以通过

进一步紧凑
mtcars %>% 
       group_by(cyl) %>% 
        nest(-cyl) %>% 
        mutate(mod_contents = map(data, ~ {
           mod <- lm(mpg ~ disp + hp, data = .x, x = TRUE)
           term <- names(coef(mod))
           pred <- mod$x %>%
                      as_tibble %>%
                            summarise_all(sd) %>%
                            unlist
            tibble(term, pred)        
            }
         )) %>%
      select(-data) %>%
      unnest    
# A tibble: 9 x 3
#    cyl term         pred
#  <dbl> <chr>       <dbl>
#1  6.00 (Intercept)   0  
#2  6.00 disp         41.6
#3  6.00 hp           24.3
#4  4.00 (Intercept)   0  
#5  4.00 disp         26.9
#6  4.00 hp           20.9
#7  8.00 (Intercept)   0  
#8  8.00 disp         67.8
#9  8.00 hp           51.0

如果我们从&#39; d1&#39;开始(基于OP的代码)

d1 %>% 
   ungroup %>%
   mutate(mod_contents = map(mod_linear, ~ {

             pred <- .x$x %>%
                       as_tibble %>%
                        summarise_all(sd) %>%
                        unlist
            term <- .x %>%
                          coef %>% 
                          names 
            tibble(term, pred)                        

        }))  %>%
   select(-mod_linear) %>%
   unnest