将ScalaTest for Spark与Yarn主服务器和集群部署模式结合使用

时间:2018-09-20 01:29:55

标签: scala unit-testing apache-spark yarn scalatest

我目前正在使用spark-submit --master yarn --deploy-mode cluster来运行测试,但是为每个测试启动和拆卸Spark应用程序的开销显然效率不高。我可以将ScalaTest软件包与Yarn和集群模式一起使用吗?

0 个答案:

没有答案