线程“main”中的异常java.lang.NoClassDefFoundError：scala / collection / mutable / SynchronizedBuffer $ class

Question

我是Spark和Scala的新手，并尝试在智能社区版中使用Cloudera Quick VM 5.8。

有人可以帮我纠正这些问题吗？

Code

sbt File

Answer 1

Spark依赖项中的

_2.10表示它适用于Scala 2.10，而不适用于2.12。如您所见here，没有spark-core_2.12，因此请使用scalaVersion := "2.11.8"和"org.apache.spark" %% "spark-core" % "2.1.0"。阅读更多http://www.scala-sbt.org/0.13/docs/Cross-Build.html。