当我尝试在Spark中运行单词计数示例时,我得到一个java.lang.NoClassDefFoundError

时间:2016-11-09 02:40:49

标签: scala apache-spark

我正在尝试在Scala Spark中运行Spark网站(http://spark.apache.org/docs/latest/quick-start.html)中的单词计数示例,但是当我尝试spark-submit时,我得到一个异常:java.lang.NoClassDefFoundError:scala / runtime / LambdaDeserialize Spark版本为2.0.1,Scala版本为2.12.0

完整的跟踪在这里:http://pastebin.com/LEjRTAy4

示例代码在spark-shell上运行良好

1 个答案:

答案 0 :(得分:0)

http://spark.apache.org/downloads.html

注意:从2.0版开始,Spark默认使用Scala 2.11构建。 Scala 2.10用户应该下载Spark源代码包并使用Scala 2.10支持构建。

使用scala 2.11.11