根据熊猫数据框中的条件分组查找匹配的行

时间:2019-06-05 15:10:03

标签: python pandas dataframe duplicates matching

我到处都在寻找这个答案,但似乎没人能满足我的需求。这是我所需要的虚拟示例:

data = {'id':[1, 2, 3, 4, 1, 1, 3, 4, 1], 
        'parent':['a', 'b', 'f', 'j', 'a', 'n', 'f', 'z', 'x'], 
        'vehicle':['car', 'car', 'truck', 'suv', 'car', 'hatch', 'truck', 'suv', 'car'], 
        'color':['red', 'blue', 'grey', 'green', 'red', 'purple', 'grey', 'green', 'red'],
        'serial': [324234, 23464, 5667, 1245, 786, 34546, 8537, 111111, 8376251537]}
df = pd.DataFrame(data)
df.sort_values(by=['id', 'parent'], inplace=True)

    id  parent  vehicle   color   serial
0   1   a        car      red     324234
4   1   a        car      red     786
5   1   n        hatch    purple  34546
8   1   x        car      red     8376251537
1   2   b        car      blue    23464
2   3   f        truck    grey    5667
6   3   f        truck    grey    8537
3   4   j        suv      green   1245
7   4   z        suv      green   111111

我需要获取id相同的所有行但父级不同,并且车辆和颜色相同。


所以我想要:

    id  parent  vehicle color   serial
0   1   a       car     red     324234
4   1   a       car     red     786
8   1   x       car     red     8376251537
3   4   j       suv     green   1245
7   4   z       suv     green   111111

请注意,我想包括上面的前两个,因为它们具有不同的序列号。 编辑:,它们属于具有相同ID的不同父级的分组的一部分。


我已经尝试过并接近:

target = df[df.duplicated(['id', 'vehicle', 'color'], keep=False)]

    id  parent  vehicle   color   serial
0   1   a       car       red     324234
4   1   a       car       red     786
8   1   x       car       red     8376251537
2   3   f       truck     grey    5667
6   3   f       truck     grey    8537
3   4   j       suv       green   1245
7   4   z       suv       green   111111

但是我不希望ID,车辆和颜色相匹配的行与相应的父级也是相同的。所以在这种情况下,我不要

    id  parent  vehicle   color   serial
2   3   f       truck     grey    5667
6   3   f       truck     grey    8537

因为他们有相同的父母。 我曾考虑过对索引进行分组和更改,但是我在做的事没有用。这似乎是一个简单的问题,也许是,但是我无法破解!

1 个答案:

答案 0 :(得分:3)

IIUC,让我们尝试一下:

df[df.groupby(['id','vehicle','color'])['parent'].transform('nunique') > 1]

输出:

   id parent vehicle  color      serial
0   1      a     car    red      324234
4   1      a     car    red         786
8   1      x     car    red  8376251537
3   4      j     suv  green        1245
7   4      z     suv  green      111111