标签: scala apache-spark apache-spark-sql persistence user-defined-functions
自spark 2.3.0起,数据帧持久性未正确发生。特别是在我将UDF应用于数据帧并持久化并对其进行计数之后,持久性永远不会发生。当我使用spark 2.2时,我没有遇到这个问题。任何人有同样的问题,知道如何解决它?