熊猫:将类别转换为数字

时间:2016-06-29 01:02:29

标签: python pandas series categorical-data

假设我的国家/地区的数据框如下:

cc | temp
US | 37.0
CA | 12.0
US | 35.0
AU | 20.0

我知道有一个pd.get_dummies函数可以将国家/地区转换为“热门编码”。但是,我希望将它们转换为索引,以便我得到cc_index = [1,2,1,3]

我假设有一种比使用get_dummies更快的方式以及numpy where子句,如下所示:

[np.where(x) for x in df.cc.get_dummies().values]

在使用“因素”的R中,这样做更容易一些。所以我希望大熊猫有类似的东西。

6 个答案:

答案 0 :(得分:84)

首先,更改列的类型:

df.cc = pd.Categorical(df.cc)

现在数据看起来很相似,但是分类存储。要捕获类别代码:

df['code'] = df.cc.cat.codes

现在你有:

   cc  temp  code
0  US  37.0     2
1  CA  12.0     1
2  US  35.0     2
3  AU  20.0     0

如果您不想修改数据框,只需获取代码:

df.cc.astype('category').cat.codes

或使用分类栏作为索引:

df2 = pd.DataFrame(df.temp)
df2.index = pd.CategoricalIndex(df.cc)

答案 1 :(得分:15)

如果只希望将序列转换为整数标识符,则可以使用pd.factorize

请注意,与pd.Categorical不同,此解决方案不会按字母顺序排序。因此,第一个国家/地区将被分配为0。如果您希望从1开始,则可以添加一个常量:

df['code'] = pd.factorize(df['cc'])[0] + 1

print(df)

   cc  temp  code
0  US  37.0     1
1  CA  12.0     2
2  US  35.0     1
3  AU  20.0     3

如果您希望按字母顺序排序,请指定sort=True

df['code'] = pd.factorize(df['cc'], sort=True)[0] + 1 

答案 2 :(得分:4)

如果您使用的是sklearn库,则可以使用LabelEncoder。像pd.Categorical一样,输入字符串在编码之前按字母顺序排序。

from sklearn.preprocessing import LabelEncoder

LE = LabelEncoder()
df['code'] = LE.fit_transform(df['cc'])

print(df)

   cc  temp  code
0  US  37.0     2
1  CA  12.0     1
2  US  35.0     2
3  AU  20.0     0

答案 3 :(得分:2)

尝试此操作,根据频率(高频-高数字)转换为数字:

labels = df[col].value_counts(ascending=True).index.tolist()
codes = range(1,len(labels)+1)
df[col].replace(labels,codes,inplace=True)

答案 4 :(得分:1)

将所有列更改为数字。它不会创建新列,而只是将数值替换为数值数据。

def characters_to_numb(*args): for arg in args: df[arg] = pd.Categorical(df[arg]) df[arg] = df[arg].cat.codes return df

答案 5 :(得分:0)

单行代码:

df[['cc']] = df[['cc']].apply(lambda col:pd.Categorical(col).codes)

如果您有list_of_columns,这也可以使用:

df[list_of_columns] = df[list_of_columns].apply(lambda col:pd.Categorical(col).codes)

此外,如果您想保留自己的NaN值,可以应用替换:

df[['cc']] = df[['cc']].apply(lambda col:pd.Categorical(col).codes).replace(-1,np.nan)