我有几年以下格式的小时数据框:
Date/Time Value
01.03.2010 00:00:00 60
01.03.2010 01:00:00 50
01.03.2010 02:00:00 52
01.03.2010 03:00:00 49
.
.
.
31.12.2013 23:00:00 77
我想平均数据,这样我就能得到每年的0小时,1小时......小时23的平均值。
所以输出看起来应该是这样的:
Year Hour Avg
2010 00 63
2010 01 55
2010 02 50
.
.
.
2013 22 71
2013 23 80
有谁知道如何在熊猫中获得这个?
答案 0 :(得分:19)
注意:既然系列具有dt访问器,则日期是索引并不重要,尽管日期/时间仍然需要是datetime64。
更新:您可以更直接地执行groupby(不使用lambda):
In [21]: df.groupby([df["Date/Time"].dt.year, df["Date/Time"].dt.hour]).mean()
Out[21]:
Value
Date/Time Date/Time
2010 0 60
1 50
2 52
3 49
In [22]: res = df.groupby([df["Date/Time"].dt.year, df["Date/Time"].dt.hour]).mean()
In [23]: res.index.names = ["year", "hour"]
In [24]: res
Out[24]:
Value
year hour
2010 0 60
1 50
2 52
3 49
如果是datetime64 索引,您可以执行以下操作:
In [31]: df1.groupby([df1.index.year, df1.index.hour]).mean()
Out[31]:
Value
2010 0 60
1 50
2 52
3 49
旧答案(会慢一些):
假设日期/时间是索引*,您可以使用groupby中的映射函数:
In [11]: year_hour_means = df1.groupby(lambda x: (x.year, x.hour)).mean()
In [12]: year_hour_means
Out[12]:
Value
(2010, 0) 60
(2010, 1) 50
(2010, 2) 52
(2010, 3) 49
对于更有用的索引,您可以从元组创建一个MultiIndex:
In [13]: year_hour_means.index = pd.MultiIndex.from_tuples(year_hour_means.index,
names=['year', 'hour'])
In [14]: year_hour_means
Out[14]:
Value
year hour
2010 0 60
1 50
2 52
3 49
*如果没有,请先使用set_index
:
df1 = df.set_index('Date/Time')
答案 1 :(得分:2)
如果您的日期/时间列采用日期时间格式(请参阅dateutil.parser以获取自动解析选项),您可以使用pandas resample,如下所示:
year_hour_means = df.resample('H',how = 'mean')
将使您的数据保持日期时间格式。这可以帮助您完成对数据的任何操作。