诸如parallelize和textFile之类的RDD函数在sparkR中不可用

时间:2015-10-28 06:50:30

标签: r sparkr

我从以下git repo-

在我的本地Mac OS上安装了SparkR
devtools::install_github('apache/spark@v1.5.0', subdir='R/pkg'). 

我看到examples of sparkR code使用了parallelizetextFile等Spark功能。但是,当我尝试相同时,它给了我以下错误:

  

错误:找不到函数“textFile”

如何在sparkR代码中使用这些功能?

1 个答案:

答案 0 :(得分:2)

不再导出这些功能。如有必要,他们仍然可以访问 通过

int * Merge( int array* a, int array* b, unsigned int sizea, unsigned int sizeb){
    //int tArray[20]; // :/ wrong
    int * newarray = new int[sizea+sizeb];

    for(unsigned int i=0; i<sizea; i++)
        newarray[i]=a[i];

    for(unsigned int i=0; i<sizeb; i++)
        newarray[i+sizea]=a[i];

    delete []a;
    delete []b;
    return newarray;
}