parLapply在R6类中

时间:2016-01-14 08:38:29

标签: r parallel-processing r6

我希望在parLapply()对象中的窗口上使用R6并注意到(至少在某些情况下)我不需要将R6函数或数据导出到节点。

以下是我可以访问parLapply()中的私有方法的示例:

require(R6);require(parallel)
square <-
R6Class("square",
        public = list(
            numbers = NA,
            squares = NA,
            initialize = function(numbers,integer) {
                self$numbers <- numbers
                squares <- private$square.numbers()
            }
        ),
        private = list(
            square = function(x) {
                return(x^2)
            },
            square.numbers = function() {
                cl <- makeCluster(detectCores())
                self$squares <- parLapply(cl,
                                          self$numbers,
                                          function (x) private$square(x)
                                          )
                stopCluster(cl)
            }
        ))
##Test
test <- square$new(list(1,2,3))
print(test$squares)
# [[1]]
# [1] 1
# 
# [[2]]
# [1] 4
# 
# [[3]]
# [1] 9

第二个例子,我也可以访问公共成员:

square2 <-
R6Class("square2",
        public = list(
            numbers = NA,
            squares = NA,
            integer = NA,
            initialize = function(numbers,integer) {
                self$numbers <- numbers
                self$integer <- integer
                squares <- private$square.numbers()
            }
        ),
        private = list(
            square = function(x) {
                return(x^2)
            },
            square.numbers = function() {
                cl <- makeCluster(detectCores())
                self$squares <- parLapply(cl,
                                          self$numbers,
                                          function (x) private$square(x)+self$integer
                                          )
                stopCluster(cl)
            }
        ))
##Test
test2 <- square2$new(list(1,2,3),2)
print(test2$squares)
#[[1]]
#[1] 3
#
#[[2]]
#[1] 6
#
#[[3]]
#[1] 11

我的问题有两个:(1)R6如何使这成为可能,以便我不需要导出数据对象和函数; (2)我可以依赖这种行为,还是这些具体例子的神器?

更新

在实例化对象后,此行为似乎也可以使用公共方法和成员:

square3 <- R6Class(
    classname = "square3",
    public = list(
        numbers = NA,
        squares = NA,
        integer = NA,
        square = function(x) {
           return(x^2)
        },
        square.numbers = function() {
            cl <- makeCluster(detectCores())
            self$squares <- parLapply(cl,
                                      self$numbers,
                                   function (x) self$square(x)+self$integer
                                  )
        stopCluster(cl)
    },
    initialize = function(numbers,integer) {
        self$numbers <- numbers
        self$integer <- integer
    }
    )
)
test3.obj <- square3$new(list(1,2,3),2)
test3.obj$square.numbers()
test3.obj$squares

# [[1]] 
# [1] 3
#
# [[2]]
# [1] 6
#
# [[3]]
# [1] 11

1 个答案:

答案 0 :(得分:1)

对于R6类,每次实例化一个对象时,该对象都会获得每个函数/方法的副本,并具有修改后的环境。为这些函数分配一个环境,其中self指向对象的公共环境(这是对象的公共面),private指向对象的私有环境。

这与S3方法不同,后者不会为对象的每个实例化复制。

总结:使用R6,对象中的所有东西都是自包含的;使用S3,该对象不包含方法。

我对使用parLapply并不熟悉,但我认为依靠与parLapply类似的工作是安全的。