PySpark无法导入collect_list,功能没有collect_list为什么?

时间:2018-08-28 02:46:03

标签: python pyspark pyspark-sql

我想在以下位置使用collect_list

from pyspark.sql.functions import collect_list

但是功能包中的collect_list_collect_list_doc

pyspark 2.3.0 version

1 个答案:

答案 0 :(得分:0)

从sql导入函数,如下所示:

from pyspark.sql import functions as F

然后您可以使用F.collect_set(“ field_name”)