在一个Spark-Python中合并两列值

时间:2019-06-24 16:06:27

标签: apache-spark pyspark apache-spark-sql

我有这张桌子在下面:

FrameForm | Sections | Framefrom_section | FrameFrom_echelon
----------|----------|-------------------|------------------
70        |  11/12   |       11/12       |      50004
70        |  13/14   |       13/14       |      60003

如何通过pySpark列上的FrameFrom进行测试,以结合Framefrom_sectionFrameFrom_echelon的两个值来获得以下结果:

FrameForm | Framefrom_section | FrameFrom_echelon
----------|-------------------|------------------
70        | [11/12,13/14]     |    [50004,60003]

0 个答案:

没有答案