在Spark 2.3中给出Maven依赖错误

时间:2018-07-27 19:49:25

标签: apache-spark

我正在使用maven构建spark 2.3 scala代码,出现以下错误。

  

错误:加载类文件SparkSession.class时检测到缺少或无效的依赖关系。

这是pom文件的片段,请告知

columnNames

1 个答案:

答案 0 :(得分:0)

您可能要检查Java和Scala版本。它们应分别为1.6或更高和2.11。否则也可能与其他依赖项(例如spark_sql)不匹配。请确保所有依赖项的版本都相同。