SparkR - 将数据帧转换为Vector / list

Question

有谁能告诉我，我们是否可以将数据帧转换为SparkR中的列表。我知道collect（）函数可以帮助你做到这一点。但是，当我们使用大量数据时，建议不要这样做。在python / Scala中，有一个名为 local Iterator （）的函数，它将数据框转换为列表。我在SparkR中苦苦挣扎。任何人都可以帮忙！

Answer 1

不幸collect()是执行此操作的最佳方法。您也可以尝试：saveAsTextFile，但在这种情况下，您可能无法获得整个数据。