我知道熊猫中的替换功能:https://pandas.pydata.org/pandas-docs/stable/generated/pandas.DataFrame.replace.html
但是我已经完成了这个简单的测试,当我尝试替换浮点值时,它无法按预期工作:
import pandas as pd
import numpy as np
df = pd.DataFrame(np.random.randn(50, 4), columns=list('ABCD'))
print(df.head(n=1))
A B C D
0 1.437202 1.919894 -1.40674 -0.316737
df = df.replace(1.437202, np.nan)
print(df.head(n=1))
A B C D
0 1.437202 1.919894 -1.40674 -0.316737
如您所见,[[0],[0]]没变……对此有什么想法吗?
答案 0 :(得分:3)
问题是浮点精度,因此将功能numpy.isclose
与mask
一起使用:
np.random.seed(123)
df = pd.DataFrame(np.random.randn(50, 4), columns=list('ABCD'))
print(df.head(n=1))
A B C D
0 -1.085631 0.997345 0.282978 -1.506295
df = df.mask(np.isclose(df.values, 0.997345))
或使用numpy.where
:
arr = np.where(np.isclose(df.values, 0.997345), np.nan, df.values)
df = pd.DataFrame(arr, index=df.index, columns=df.columns)
print(df.head(n=1))
A B C D
0 -1.085631 NaN 0.282978 -1.506295
编辑:您还可以通过select_dtypes
仅获取数字列,以使用[]
按子集进行过滤:
np.random.seed(123)
df = pd.DataFrame(np.random.randn(50, 4), columns=list('ABCD')).assign(E='a')
cols = df.select_dtypes(np.number).columns
df[cols] = df[cols].mask(np.isclose(df[cols].values, 0.997345))
print(df.head(n=1))
A B C D E
0 -1.085631 NaN 0.282978 -1.506295 a
答案 1 :(得分:0)
另一种针对特定索引的技巧:
>>> print(df.head(n=1))
A B C D
0 -0.042839 1.701118 0.064779 1.513046
>>> df['A'][0] = np.nan
>>> print(df.head(n=1))
A B C D
0 NaN 1.701118 0.064779 1.513046