Spark数据帧加载到驱动程序中

时间:2017-11-22 13:23:56

标签: scala apache-spark dataframe

想象一下,我们有一些

val hiveTableDataFrame: DataFrame

我想将这个数据帧的行传输到我的驱动程序中。问题是hiveTableDataFrame太大而我无法使用hiveTableDataFrame.collect()。有没有办法通过块读取数据框中的数据?

0 个答案:

没有答案