标签: scala apache-spark dataframe
想象一下,我们有一些
val hiveTableDataFrame: DataFrame
我想将这个数据帧的行传输到我的驱动程序中。问题是hiveTableDataFrame太大而我无法使用hiveTableDataFrame.collect()。有没有办法通过块读取数据框中的数据?
hiveTableDataFrame
hiveTableDataFrame.collect()