如何计算pandas

Question

我有大熊猫数据帧，我想计算其中每个唯一值的出现，我尝试跟随但需要花费很多时间和内存使用量。我怎么能用pythonic的方式呢？

pack=[]
for index,row in packets.iterrows ():
    pack.extend(pd.Series(row).dropna().values.tolist())

unique, count= np.unique(pack, return_counts=True)
counts= np.asarray((unique, count))

Answer 1

您似乎想要计算所有列的值计数。您可以将其展平为系列，删除NaN，然后​​调用value_counts。这是一个样本 -

df

     a    b
0  1.0  NaN
1  1.0  NaN
2  3.0  3.0
3  NaN  4.0
4  5.0  NaN
5  NaN  4.0
6  NaN  5.0

pd.Series(df.values.ravel()).dropna().value_counts()

5.0    2
4.0    2
3.0    2
1.0    2
dtype: int64

另一种方法是使用np.unique -

u, c = np.unique(pd.Series(df.values.ravel()).dropna().values, return_counts=True)
pd.Series(c, index=u)

1.0    2
3.0    2
4.0    2
5.0    2
dtype: int64

请注意，第一种方法按计数的降序对结果进行排序，而后者则不按。