多个Pandas DataFrame的get_dummies()

时间:2019-05-15 13:59:26

标签: python pandas

我有一个DataFrames列表,我想对某些列进行一次热编码。例如,如果:

In[1]:  df1 = pd.DataFrame(np.array([['a', 'a'], ['b', 'b'], ['c', 'c']]), 
                   columns=['col_1', 'col_2'])
        df2 = pd.DataFrame(np.array([['a', 'a'], ['b', 'b'], ['c', 'c']]),
                   columns=['col_1', 'col_2'])

        combined = [df1, df2]
        combined


Out[1]:    col_1  col_2
        0      a      a
        1      b      b
        2      c      c

我目前正在使用以下方法。

In[2]:  for df in combined:
            one_hot = pd.get_dummies(df["col_2"])

            df[one_hot.columns] = one_hot
            df.drop("col_2", axis=1, inplace=True)


        df1

Out[2]:      col_1   a   b   c
          0      a   1   0   0
          1      b   0   1   0 
          2      c   0   0   1

我想念一个更简洁的解决方案吗?

编辑:一个重要的要求是我需要修改原始数据框。

2 个答案:

答案 0 :(得分:2)

我认为您可以将concatkey一起使用,这将添加新级别的索引,然后是get_dummies

s=pd.concat(combined,keys=range(len(combined)))['col_2'].str.get_dummies()
s['col_1']=pd.concat(combined,keys=range(len(combined)))['col_1'].values

s
Out[20]: 
     a  b  c col_1
0 0  1  0  0     a
  1  0  1  0     b
  2  0  0  1     c
1 0  1  0  0     a
  1  0  1  0     b
  2  0  0  1     c

如果要将它们保存到不同df的列表中,则可以groupby并将其保存到dict

d={x:y.reset_index(level=0,drop=True) for x , y in s.groupby(level=0)}
d
Out[16]: 
{0:    a  b  c
 0  1  0  0
 1  0  1  0
 2  0  0  1, 1:    a  b  c
 0  1  0  0
 1  0  1  0
 2  0  0  1}

答案 1 :(得分:2)

OP的方法很好

for df in combined:
    one_hot = pd.get_dummies(df["col_2"])

    df[one_hot.columns] = one_hot
    df.drop("col_2", axis=1, inplace=True)

重新分配给所有名称

df1, df2 = [df.join(pd.get_dummies(df['col_2'])).drop('col_2', 1) for df in combined]