为什么我们需要将数据帧转换为rdd才能获得分区数?

时间:2019-07-06 08:36:27

标签: apache-spark dataframe

在spark数据帧中,为什么我们需要首先将数据帧转换为rdd才能计算分区数。dataFrames是否未分区?如果对数据帧进行了分区,那么获取dataFrame的分区数的正确方法是什么。

df.rdd.getNumPartitions()

0 个答案:

没有答案