连接两个数据框时如何在条件下使用UDF

时间:2018-10-30 15:03:44

标签: python-3.x apache-spark pyspark cloudera

当我将两个数据帧连接在一起时,我试图在某种情况下使用UDF,但遇到以下错误:'persist()解析为“ java.lang.RuntimeException:无效的PythonUDF(...),需要来自以下属性的属性一个以上的孩子”

**启用交叉联接(spark.conf.set(“ spark.sql.crossJoin.enabled”,True)不能解决问题

0 个答案:

没有答案