标签: scala unit-testing apache-spark yarn scalatest
我目前正在使用spark-submit --master yarn --deploy-mode cluster来运行测试,但是为每个测试启动和拆卸Spark应用程序的开销显然效率不高。我可以将ScalaTest软件包与Yarn和集群模式一起使用吗?
spark-submit --master yarn --deploy-mode cluster