为什么pyspark.sql.DataFrame没有mapPartitions?

时间:2019-03-18 18:12:33

标签: pyspark-sql

Scala版本具有org.apache.spark.sql.Dataset#mapPartitions,但是pyspark.sql.DataFrame没有mapPartitions。我必须先转换为rdd,然后再将其转换回DataFrame。

是否有理由在mapPartitions中不支持pyspark.sql.DataFrame

0 个答案:

没有答案