我是Spark的新手。我想在本地系统中运行一个简单的火花项目。 所以根据教程,我运行'sbt / sbt assembly'。现在jar文件在core / target / scala-2.9.2 / spark-core-assembly-0.7.0.jar中创建。要运行示例,请告诉我在哪里以及如何将此jar添加到classpath ?
此致 迪内希
答案 0 :(得分:2)
Spark文档的快速入门指南包含使用带有Scala和Java的Spark开发独立应用程序的文档。这些说明显示了如何向Maven或SBT项目添加Spark依赖项。
如果您没有使用Maven或SBT来构建项目,则必须将相应的标志传递给javac
和java
,以将Spark程序集JAR添加到类路径中,同样就像你为任何其他JAR依赖做的那样。
另外,0.7.0是Spark的一个相当旧的版本(它几乎在一年前发布);我建议使用newer version,例如0.9.0。