合并具有来自一个数据帧的相似数据的列

时间:2019-03-25 19:29:49

标签: python pandas

我有一张表,其中有重复的列,我想将它们合并成一个单列。它们共享相同的列名,但我想将具有相同标题的任何列合并为一个。

除了其他方面,我尝试使用merge,concat,但没有运气。

data = [['a','a','c'],['a','b','d'],['a','c','c']]
df = pd.DataFrame(data,columns=['col1','col2','col1'])
df
co1 col2 col1
a     a    c
a     b    d
a     c    c 

从现在开始,我希望有两列“ col1 with a,a,a,c,d,c”和“ col2 a,b,c,nan,nan,nan”

2 个答案:

答案 0 :(得分:2)

首先stack,然后unstack。我们需要做更多的工作,然后才能拆开数据。

u = df.stack()
(u.to_frame()
  .set_index(u.groupby(u.index).cumcount(), append=True)
  .unstack(1)
  .sort_index(level=1)[0]
  .reset_index(drop=True))

  col1 col2
0    a    a
1    a    b
2    a    c
3    c  NaN
4    d  NaN
5    c  NaN

另一种选择是groupbyto_dict和重建。

dct = (df.groupby(df.columns, axis=1)
                          # x.values.ravel().tolist()
         .apply(lambda x: [z for y in x.values for z in y])
         .to_dict())
pd.DataFrame.from_dict(dct, orient='index').T


  col1  col2
0    a     a
1    c     b
2    a     c
3    d  None
4    a  None
5    c  None

答案 1 :(得分:1)

melt groupbyconcat

d={x : y['value'].reset_index(drop=True) for x,y in df.melt().groupby('variable')}
df=pd.concat(d,1)
df
Out[39]: 
  col1 col2
0    a    a
1    a    b
2    a    c
3    c  NaN
4    d  NaN
5    c  NaN