如何将多个RDD [(String,Double,Double)]组合成一个RDD?

时间:2018-04-23 00:29:22

标签: scala

for(i <- 1 to 20) {
    val tmp = rdd.sample(true, 1)
    val rdd2 = resampledData(tmp)
    }

我想在单个rdd中将每个rdd2组合在循环中。 rdd2的类型是RDD [(String,Double,Double)]如何在需要时初始化新的vriable?

1 个答案:

答案 0 :(得分:0)

val combined =(1到20).map(x =&gt; resampledData(rdd.sample(true,1)))。reduce(_ union _)