Apache Spark - 如何捕获所有异常并将其记录或传播异常?

时间:2016-10-30 09:58:02

标签: scala apache-spark exception-handling apache-spark-sql

我们使用Spark 1.6.1 VersionScala 2.10版本来编写Spark应用程序。

如何捕获所有异常并处理它[Log it or Propagate it]?我们使用Spark SQL从源代码创建DataFrames并在DF上应用转换,最后将DF写入某个数据库。

我应该使用简单的try catch还是Scala 2.10 Try, Sucess, Failure

如果我使用Scala 2.10功能,是否会捕获所有异常(致命和非致命)?

0 个答案:

没有答案