在Windows 7上运行Apache Spark

时间:2014-09-08 10:05:26

标签: windows apache-spark

我正在尝试在 Windows 7 上运行 Apache Spark 。起初我已经通过 msi 安装了 SBT ,然后通过 7-zip 将文件从spark-1.0.0提取到程序文件中。在命令行中,我写了以下内容:

spark-directory: sbt/sbt assembly

经过几秒钟的处理后,我收到了如下错误:

-server access error: connection timed out
-could not retrieve jansi 1.1
-error during sbt execution: error retrieving required libraries
-unresolved dependency, jansi 1.1 not found

您能否就 Windows 上运行 Spark 提供一些建议?我正在寻找正确的方法因为我对这项技术全新。问候。

2 个答案:

答案 0 :(得分:1)

您可以使用here

中的预建火花

bin文件夹中的脚本适用于Windows 7。 您需要在路径中设置HADOOP_HOME变量。

spark on windows了解更多信息

答案 1 :(得分:0)

如果你使用sbt方法构建,那么你也需要git。 在您的计算机上安装Scala,sbt和git。下载Spark source code并运行以下命令

sbt assembly

如果你使用预建版本,这是一步一步的过程:
How to run Apache Spark on Windows7 in standalone mode