如何遍历数据框的数组值?

时间:2019-10-13 13:41:24

标签: pyspark pyspark-sql pyspark-dataframes

我有一个看起来像这样的Pyspark数据框

>>> df1.show(1,False)
+---------------------------+
|col1                       |
+---------------------------+
|[this, is, a, sample, text]| => Not a fixed array elements
+---------------------------+

还有一个类似的查找表/ df

>>> lookup.show()
+------+
|lookup|
+------+
|  this|
|    is|
|     a|
|sample|
+------+

对于每一行,我需要在df1数据帧中查找lookup的每个数组元素,并返回true或false [T,T,T,T,F]

如何遍历df1

0 个答案:

没有答案