将没有固定数量元素的列表拆分为Pyspark列

Question

我有一个spark dataframe列，其中每一行都是一个列表。这些列表没有相同数量的元素，但我想将此列分为几列。

元素是字符串，当列应该为空时（第一行，第三列），我希望有一个“”。

该网站的示例完美地总结了我想做的事情： https://community.hortonworks.com/questions/203839/spark-split-array-to-separate-column.html

谢谢。