我有一个带有一列ID和一列值的数据框 - 每个ID与两行或更多行相关联。当给定ID中的任何值的子集满足我的条件时(在这种情况下,值的子集为零),我想用新的ID标记这些行,该ID包含原始ID以及唯一的附加数字识别子集。
我到目前为止尝试过的代码:
import pandas as pd
d = {'ID': ['2016/01 100','2016/01 100','2016/01 100','2016/01 100','2016/01 200',\
'2016/01 200','2016/01 200','2016/01 200'], 'Value': [-343.68, 343.68, -55.2, 55.2,\
-158.77, 158.77, 123.3, -123.3]}
df = pd.DataFrame(data=d)
df['Cumulative_Sum'] = round(df.Value.cumsum(),2)
print(df)
current_ID = df.loc[0, 'ID']
sum_counter = 1
counter = 0
for row in df.index.values:
if (df.loc[row, 'Cumulative_Sum'] == 0):
df.loc[counter:row, 'New_ID'] = str(df.loc[row, 'ID']) + "_" + str(sum_counter)
counter = row + 1
sum_counter = sum_counter + 1
if (counter < len(df.index.values)):
if (df.loc[counter, 'ID'] != df.loc[row, 'ID']):
sum_counter = 1
print (df)
这会产生所需的结果,但在数十万行上运行时速度很慢。
ID Value Cumulative_Sum New_ID
0 2016/01 100 -343.68 -343.68 2016/01 100_1
1 2016/01 100 343.68 0.00 2016/01 100_1
2 2016/01 100 -55.20 -55.20 2016/01 100_2
3 2016/01 100 55.20 0.00 2016/01 100_2
4 2016/01 200 -158.77 -158.77 2016/01 200_1
5 2016/01 200 158.77 0.00 2016/01 200_1
6 2016/01 200 123.30 123.30 2016/01 200_2
7 2016/01 200 -123.30 0.00 2016/01 200_2
是否有更快的方法在没有循环的情况下执行此操作,同时仍然以我需要的格式保留新ID?
答案 0 :(得分:2)
为令人讨厌的外表道歉。
我使用嵌套调用进行分组,在其中使用cumsum
来查找以零结尾的连续组。最后,使用ngroup
来获取标签。
然后我使用pd.Series.str.cat
将结果附加到旧ID。
df.assign(
New_ID=
df.ID.str.cat(
df.groupby('ID').apply(
lambda d: d.groupby(
d.Cumulative_Sum.eq(0).iloc[::-1].cumsum(),
sort=False).ngroup()
).add(1).astype(str),
sep='_'
)
)
ID Value Cumulative_Sum New_ID
0 2016/01 100 -343.68 -343.68 2016/01 100_1
1 2016/01 100 343.68 0.00 2016/01 100_1
2 2016/01 100 -55.20 -55.20 2016/01 100_2
3 2016/01 100 55.20 0.00 2016/01 100_2
4 2016/01 200 -158.77 -158.77 2016/01 200_1
5 2016/01 200 158.77 0.00 2016/01 200_1
6 2016/01 200 123.30 123.30 2016/01 200_2
7 2016/01 200 -123.30 0.00 2016/01 200_2