是否可以在PySpark中使用Java或Scala FlatMapFunction？

Question

有没有办法在PySpark作业中使用Java或Scala中定义的org.apache.spark.api.java.function.FlatMapFunction或org.apache.spark.api.java.function.Function？

使用通过_jvm获得的实例不起作用，我还没有看到任何方法来注册函数，例如可以为Spark SQL UDF和UDAF做些什么。