Question

我正在尝试将方差为0的熊猫数据框中的列删除。我确定这已经在某处得到了回答，但是我在查找线程上遇到了很多麻烦。我找到了this thread，但是当我尝试使用数据框baseline的解决方案

baseline_filtered=baseline.loc[:,baseline.std() > 0.0]

我得到了错误

    "Unalignable boolean Series provided as "

IndexingError: Unalignable boolean Series provided as indexer (index of the boolean Series and of the indexed object do not match).

那么，有人可以告诉我为什么会出现此错误或提供替代解决方案吗？

Answer 1

有一些非数字列，因此std默认删除此列：

baseline = pd.DataFrame({
        'A':list('abcdef'),
         'B':[4,5,4,5,5,4],
         'C':[7,8,9,4,2,3],
         'D':[1,1,1,1,1,1],
         'E':[5,3,6,9,2,4],
         'F':list('aaabbb')
})

#no A, F columns
m = baseline.std() > 0.0
print (m)
B     True
C     True
D    False
E     True
dtype: bool

因此，添加或删除字符串列的可能解决方案是使用DataFrame.reindex：

baseline_filtered=baseline.loc[:,m.reindex(baseline.columns, axis=1, fill_value=True) ]
print (baseline_filtered)
   A  B  C  E  F
0  a  4  7  5  a
1  b  5  8  3  a
2  c  4  9  6  a
3  d  5  4  9  b
4  e  5  2  2  b
5  f  4  3  4  b

baseline_filtered=baseline.loc[:,m.reindex(baseline.columns, axis=1, fill_value=False) ]
print (baseline_filtered)
   B  C  E
0  4  7  5
1  5  8  3
2  4  9  6
3  5  4  9
4  5  2  2
5  4  3  4

另一个想法是使用DataFrame.nunique处理字符串和数字列：

baseline_filtered=baseline.loc[:,baseline.nunique() > 1]
print (baseline_filtered)
   A  B  C  E  F
0  a  4  7  5  a
1  b  5  8  3  a
2  c  4  9  6  a
3  d  5  4  9  b
4  e  5  2  2  b
5  f  4  3  4  b

删除列，熊猫的方差低

1 个答案: