基于值的多列选择

时间:2018-11-07 10:59:35

标签: python python-3.x pandas dataframe indexing

我有以下数据框:

df = pd.DataFrame({ 'Group' : [1,1,1,2,2,2,2],
               'Type' : ["High","Medium","Low","High","Medium","Low","Low"],
               'set_0' :["a","a","a","a","a","a","a"],
               'set_1' :["b","b","b","c","c","c","d"],
               'set_2' :["e","e","e","NULL","NULL","f","f"],
               'set_3' :["g","g","NULL","NULL","NULL","NULL","NULL"],
               'set_4' :["NULL","NULL","NULL","NULL","NULL","NULL","NULL"],
               'set_5' :["NULL","NULL","NULL","NULL","NULL","NULL","NULL"],
               'set_6' :["h","h","NULL","NULL","NULL","NULL","NULL"]
                                 })

我想删除一些“ set_”列。如果与“ set_”相关的列具有所有“ NULL”值,则我不希望代码保留它们。我只想将set_列保留在其中至少包含一个非“ NULL”值。

如何在不对其进行硬编码的情况下处理它?<​​/ p>

1 个答案:

答案 0 :(得分:0)

首先选择object dtype系列,然后对指定的字符串进行测试。然后使用pd.DataFrame.loc和布尔索引或pd.DataFrame.drop

idx = df.select_dtypes(['object']).eq('NULL').all()

df = df.loc[:, ~df.columns.isin(idx[idx].index)]

# alternative:
# df = df.drop(idx[idx].index, 1)

print(df)

   Group    Type set_0 set_1 set_2 set_3 set_6
0      1    High     a     b     e     g     h
1      1  Medium     a     b     e     g     h
2      1     Low     a     b     e  NULL  NULL
3      2    High     a     c  NULL  NULL  NULL
4      2  Medium     a     c  NULL  NULL  NULL
5      2     Low     a     c     f  NULL  NULL
6      2     Low     a     d     f  NULL  NULL