Question

我在pandas数据帧上使用groupby来删除所有没有特定列最小值的行。像这样：

df1 = df.groupby("item", as_index=False)["diff"].min()

但是，如果我有超过这两列，则其他列将被删除。我可以使用groupby保留这些列，还是我必须找到一种不同的方法来删除行？

我的数据如下：

    item    diff   otherstuff
   0   1       2            1
   1   1       1            2
   2   1       3            7
   3   2      -1            0
   4   2       1            3
   5   2       4            9
   6   2      -6            2
   7   3       0            0
   8   3       2            9

并且最终应该像：

    item   diff  otherstuff
   0   1      1           2
   1   2     -6           2
   2   3      0           0

但我得到的是：

    item   diff
   0   1      1           
   1   2     -6           
   2   3      0

我一直在查看文档，但找不到任何内容。我试过了：

df1 = df.groupby(["item", "otherstuff"], as_index=false)["diff"].min()

df1 = df.groupby("item", as_index=false)["diff"].min()["otherstuff"]

df1 = df.groupby("item", as_index=false)["otherstuff", "diff"].min()

但这些都没有奏效（最后一个实现了语法是为了在创建一个组后聚合）。

Answer 1

方法＃1：使用idxmin()获取最小diff元素的索引，然后选择：

>>> df.loc[df.groupby("item")["diff"].idxmin()]
   item  diff  otherstuff
1     1     1           2
6     2    -6           2
7     3     0           0

[3 rows x 3 columns]

方法＃2：按diff排序，然后获取每个item组中的第一个元素：

>>> df.sort_values("diff").groupby("item", as_index=False).first()
   item  diff  otherstuff
0     1     1           2
1     2    -6           2
2     3     0           0

[3 rows x 3 columns]

请注意，即使行内容相同，结果索引也会不同。

Answer 2

您可以将DataFrame.sort_values与DataFrame.drop_duplicates结合使用：

df = df.sort_values(by='diff').drop_duplicates(subset='item')
print (df)
   item  diff  otherstuff
6     2    -6           2
7     3     0           0
1     1     1           2

如果可能的话，每个组有多个最小值，并且希望所有最小行都将boolean indexing和transform用作每个组的最小值：

print (df)
   item  diff  otherstuff
0     1     2           1
1     1     1           2 <-multiple min
2     1     1           7 <-multiple min
3     2    -1           0
4     2     1           3
5     2     4           9
6     2    -6           2
7     3     0           0
8     3     2           9

print (df.groupby("item")["diff"].transform('min'))
0    1
1    1
2    1
3   -6
4   -6
5   -6
6   -6
7    0
8    0
Name: diff, dtype: int64

df = df[df.groupby("item")["diff"].transform('min') == df['diff']]
print (df)
   item  diff  otherstuff
1     1     1           2
2     1     1           7
6     2    -6           2
7     3     0           0

Answer 3

如果有/你需要一分钟，上面的答案很有效。在我的情况下，可能有多个分钟，我希望所有行等于min .idxmin()没有给你。这工作

def filter_group(dfg, col):
    return dfg[dfg[col] == dfg[col].min()]

df = pd.DataFrame({'g': ['a'] * 6 + ['b'] * 6, 'v1': (list(range(3)) + list(range(3))) * 2, 'v2': range(12)})
df.groupby('g',group_keys=False).apply(lambda x: filter_group(x,'v1'))

顺便说一下，.filter()也与此问题相关，但对我不起作用。

Answer 4

我尝试了每个人的方法，但无法正常工作。相反，我一步一步地完成了这个过程，最终得到了正确的结果。

df.sort_values(by='item', inplace=True, ignore_index=True)
df.drop_duplicates(subset='diff', inplace=True, ignore_index=True)
df.sort_values(by=['diff'], inplace=True, ignore_index=True)

更多解释：

按所需的最小值对项目进行排序
删除要排序的列的重复项
重新排序数据，因为数据仍然按最小值排序

Answer 5

如果您知道所有“项目”都可以分类，那么请使用duplicated：

df.sort_values(by='diff').duplicated(subset='item', keep='first')

使用min（）和group by时保留其他列

5 个答案: