自火花2.3.0以来,坚持火花数据帧不会发生

时间:2018-06-15 22:26:54

标签: scala apache-spark apache-spark-sql persistence user-defined-functions

自spark 2.3.0起,数据帧持久性未正确发生。特别是在我将UDF应用于数据帧并持久化并对其进行计数之后,持久性永远不会发生。当我使用spark 2.2时,我没有遇到这个问题。任何人有同样的问题,知道如何解决它?

0 个答案:

没有答案