Pandas - 在数据框中添加标志列

时间:2017-08-11 08:28:42

标签: python pandas dataframe iterator

我有一个类似的数据框:

Client_ID    Product_nb   Item_id
1            1            i1  
1            1            i2
1            1            i3

1            2            i2
1            2            i5  
1            2            i7

1            3            i1
1            3            i2
1            3            i4
1            3            i6

2            1            i1
2            1            i2
2            1            i3
2            1            i4

2            2            i1
2            2            i2
...          ...          ...

因此每个客户端(client_id)都有多个产品(Product_nb)。对于每个产品,我只想保留一个项目(item_id)。对于同一客户,下一个产品不应与之前的产品相对应。

如果我需要保留该项目,我想在每个项目旁边添加一个标记:

Client_ID    Product_nb   Item_id   Keep
1            1            i1        1
1            1            i2        0
1            1            i3        0

1            2            i2        1
1            2            i5        0
1            2            i7        0

1            3            i1        0
1            3            i2        0
1            3            i4        1
1            3            i6        0

2            1            i1        1
2            1            i2        0
2            1            i3        0
2            1            i4        0

2            2            i1        0
2            2            i2        1
...          ...          ...       ...

我的想法是迭代所有客户和产品。对于每个客户端,保存已保存在列表中的项目:

df = df.set_index(['client_id','product_nb','item_id','keep'])
client_ids = df.index.get_level_values('client_id').unique()
for client in client_ids:
    list_already = []
    prod_nbs = df.loc[client].index.get_level_values('product_nb').unique()
    for prod_nb in prod_nbs:
        item_ids = df.loc[client,prod_nb].index.get_level_values('item_id').unique()
        for item_id in item_ids:
            if (item_id in list_already):
                df.loc[client,prod_nb,item_id,'keep'] = 1
                continue
            else:
                list_already.append(item_id)
                df.loc[client,prod_nb,item_id,'keep'] = 1
                break

但这会返回输入数据帧。

我会很高兴得到任何帮助。谢谢

1 个答案:

答案 0 :(得分:-1)

在大熊猫中,你通常不想循环你的数据框架。它很慢,几乎任何东西都有更多优化的例程。在你的情况下

df.groupby(['Client_ID', 'Product_nb'])['Item_id'].first()

完成这项工作。将df替换为您的DataFrame名称

编辑:我重读了约束,你所选择的值应该是唯一的。最好先预先过滤值,然后再groupby