Question

我对scala和sbt非常陌生。
我想用sbt程序集运行Junit测试。
我设计了所有测试，并全部使用IntelliJ正常运行。当我尝试使用测试进行构建时，它总是会失败，并给出很多错误。

这是我的build.sbt

name := "updater"
version := "0.1-SNAPSHOT"
scalaVersion := "2.11.12"

val sparkVersion = "2.4.0"

    libraryDependencies ++= Seq(

          //"org.scala-lang" % "scala-reflect" % "2.11.12",
          "org.apache.spark" %% "spark-core" % sparkVersion % Provided,
          "org.apache.spark" %% "spark-sql" % sparkVersion % Provided,
          "com.typesafe" % "config" % "1.3.4",


          //Testing
          "junit" % "junit" % "4.10" % Test,
          "com.novocode" % "junit-interface" % "0.11" % Test
          //  exclude("junit", "junit-dep")
          ,
          //"org.scalatest" %% "scalatest" % "3.0.7" % Test,
          "org.easymock" % "easymock" % "4.0.2" % Test,


          //Logging
          "ch.qos.logback" % "logback-classic" % "1.2.3",
          "com.typesafe.scala-logging" %% "scala-logging" % "3.9.0"
        )

        assemblyMergeStrategy in assembly := {
          case PathList("src/test/resources/library.properties", xs@_*) => MergeStrategy.discard
          case PathList("META-INF", xs@_*) => MergeStrategy.discard
          case x => MergeStrategy.first
        }

我认为问题the log file是您的责任，因为newby似乎无法理解。这让我发疯。

This是我的抽象Test类，应该在每个测试类中使用@BeforeClass初始化spark上下文。我之所以只包括它，是因为我怀疑这可能是失败的原因。

您对解决方法有何建议？
谢谢

Answer 1

我正在像这样讲课：

 abstract class SparkTest {

  val spark: SparkSession = SparkTest.spark

}

    object SparkTest {
      var spark: SparkSession = _

      @BeforeClass
      def initializeSpark(): Unit = {
        spark = SparkSession
          .builder()
          .appName("TableUpdaterTest")
          .master("local")
          .getOrCreate()
      }

      @AfterClass
      def stopSpark(): Unit = {
            spark.stop()
      }
    }

显然，通过注释spark.stop()，一切开始起作用。
有人对为什么有想法吗？

带有Junit测试的sbt组装失败

1 个答案: