我正在使用Pandas来构建和处理数据。这是我的DataFrame:
我想对时间序列数据进行重新采样,并为每个ID(此处命名为#34; 3"),从开始到结束(beginning_time / end_time)获得所有比特率分数。例如,对于第一行,我希望所有秒数,从2016-07-08 02:17:42到2016-07-08 02:17:55,具有相同的比特率,并且具有相同的ID当然。像这样:
例如,给定:
df = pd.DataFrame(
{'Id' : ['CODI126640013.ts', 'CODI126622312.ts'],
'beginning_time':['2016-07-08 02:17:42', '2016-07-08 02:05:35'],
'end_time' :['2016-07-08 02:17:55', '2016-07-08 02:26:11'],
'bitrate': ['3750000', '3750000']})
给出:
我希望第一行:
第二行的相同内容.. 所以客观化是在开始和结束时间之间重新采样deltaTime,比特率当然必须是相同的。
我正在尝试此代码:
df['new_beginning_time'] = pd.to_datetime(df['beginning_time'])
df.set_index('new_beginning_time').groupby('Id', group_keys=False).apply(lambda df: df.resample('S').ffill()).reset_index()
但在这种情况下,它并没有奏效!有任何想法吗 ?非常感谢你!
答案 0 :(得分:1)
这应该可以解决问题
all = []
for row in df.itertuples():
time_range = pd.date_range(row.beginning_time, row.end_time, freq='1S')
all += (zip(time_range, [row.Id]*len(time_range), [row.bitrate]*len(time_range)))
pd.DataFrame(all)
In[209]: pd.DataFrame(all)
Out[209]:
0 1 2
0 2016-07-08 02:17:42 CODI126640013.ts 3750000
1 2016-07-08 02:17:43 CODI126640013.ts 3750000
2 2016-07-08 02:17:44 CODI126640013.ts 3750000
3 2016-07-08 02:17:45 CODI126640013.ts 3750000
4 2016-07-08 02:17:46 CODI126640013.ts 3750000
5 2016-07-08 02:17:47 CODI126640013.ts 3750000
6 2016-07-08 02:17:48 CODI126640013.ts 3750000
7 2016-07-08 02:17:49 CODI126640013.ts 3750000
编辑:我使用python 2.7,python 3作为不同的zip()
答案 1 :(得分:1)
您可以melt
使用resample
- 0.18.1 version of pandas:
df.beginning_time = pd.to_datetime(df.beginning_time)
df.end_time = pd.to_datetime(df.end_time)
df = pd.melt(df, id_vars=['Id','bitrate'], value_name='dates').drop('variable', axis=1)
df.set_index('dates', inplace=True)
print(df)
Id bitrate
dates
2016-07-08 02:17:42 CODI126640013.ts 3750000
2016-07-08 02:05:35 CODI126622312.ts 3750000
2016-07-08 02:17:55 CODI126640013.ts 3750000
2016-07-08 02:26:11 CODI126622312.ts 3750000
print (df.groupby('Id').resample('1S').ffill())
Id bitrate
Id dates
CODI126622312.ts 2016-07-08 02:05:35 CODI126622312.ts 3750000
2016-07-08 02:05:36 CODI126622312.ts 3750000
2016-07-08 02:05:37 CODI126622312.ts 3750000
2016-07-08 02:05:38 CODI126622312.ts 3750000
2016-07-08 02:05:39 CODI126622312.ts 3750000
2016-07-08 02:05:40 CODI126622312.ts 3750000
2016-07-08 02:05:41 CODI126622312.ts 3750000
2016-07-08 02:05:42 CODI126622312.ts 3750000
2016-07-08 02:05:43 CODI126622312.ts 3750000
2016-07-08 02:05:44 CODI126622312.ts 3750000
2016-07-08 02:05:45 CODI126622312.ts 3750000
2016-07-08 02:05:46 CODI126622312.ts 3750000
2016-07-08 02:05:47 CODI126622312.ts 3750000
...
...