安装Spark 1.4附带的SparkR

时间:2015-06-16 13:08:54

标签: r apache-spark sparkr

最新版本的Spark(1.4)现在附带SparkR。有谁知道如何在Windows上安装SparkR实现? sparkR.R脚本目前位于C:/spark-1.4.0/R/pkgs/R /

This似乎是朝着正确方向迈出的一步,但这些说明并不适用于Windows,因为它没有与之相关的sparkR目录。

3 个答案:

答案 0 :(得分:3)

@DavidArenburg让我走上正轨。

按照C:\ spark-1.4.0 \ R \ _WINDOWS.md中的Windows文档,我安装了RTools并将R.exe和RTools添加到我的计算机路径中。

然后,我在C:\ spark-1.4.0 \ R中运行了install-dev.bat这添加了我缺少的lib \ SparkR \安装。

然后,从命令提示符,我运行

mklink /D "C:\Program Files\R\R-3.1.3\library\SparkR" "C:\spark-1.4.0\R\lib\SparkR"

这在我的R包目录中添加了一个链接到spark文件夹中的安装。

library(SparkR) # this should run now.

答案 1 :(得分:0)

我自己找到一个解决方案感到很沮丧,我整理了一个快速写的here,它解决了Mac上的安装问题,但它不应该远离Windows中的实现。希望这可以帮助。

答案 2 :(得分:0)

出于某种原因,我无法使用mklink。

所以我非常简单地将SparkR文件夹从我的Spark安装(在我的计算机上找到它:C:\ spark \ spark \ R \ lib)复制粘贴到我的R库文件夹(在我的计算机上)它位于:C:\ Program Files \ R \ R-3.1.1 \ library。

现在它正在工作!