在Intellij / Eclipse中导入Spark 2.0 Jars

Question

我看到从2.0开始，/lib文件夹中没有装配jar的火花。我需要导入哪些jar文件才能在Intellij中使用spark？

Answer 1

你需要导入spark的maven资源库，对于build.sbt文件中的sbt

libraryDependencies += "org.apache.spark" % "spark-core_2.10" % "2.0.0"

同样可以在maven，gradle等的以下链接中找到 https://mvnrepository.com/artifact/org.apache.spark/spark-core_2.10/2.0.0