在熊猫数据框中获得平日几个小时的平均值

时间:2013-06-06 16:18:06

标签: python datetime pandas average statistics

我有几年以下格式的小时数据框:

Date/Time            Value
01.03.2010 00:00:00  60
01.03.2010 01:00:00  50
01.03.2010 02:00:00  52
01.03.2010 03:00:00  49
.
.
.
31.12.2013 23:00:00  77

我想平均数据,这样我就能得到每年的0小时,1小时......小时23的平均值。

所以输出看起来应该是这样的:

Year Hour           Avg
2010 00              63
2010 01              55
2010 02              50
.
.
.
2013 22              71
2013 23              80

有谁知道如何在熊猫中获得这个?

2 个答案:

答案 0 :(得分:19)

注意:既然系列具有dt访问器,则日期是索引并不重要,尽管日期/时间仍然需要是datetime64。

更新:您可以更直接地执行groupby(不使用lambda):

In [21]: df.groupby([df["Date/Time"].dt.year, df["Date/Time"].dt.hour]).mean()
Out[21]:
                     Value
Date/Time Date/Time
2010      0             60
          1             50
          2             52
          3             49

In [22]: res = df.groupby([df["Date/Time"].dt.year, df["Date/Time"].dt.hour]).mean()

In [23]: res.index.names = ["year", "hour"]

In [24]: res
Out[24]:
           Value
year hour
2010 0        60
     1        50
     2        52
     3        49

如果是datetime64 索引,您可以执行以下操作:

In [31]: df1.groupby([df1.index.year, df1.index.hour]).mean()
Out[31]:
        Value
2010 0     60
     1     50
     2     52
     3     49

旧答案(会慢一些):

假设日期/时间是索引*,您可以使用groupby中的映射函数:

In [11]: year_hour_means = df1.groupby(lambda x: (x.year, x.hour)).mean()

In [12]: year_hour_means
Out[12]:
           Value
(2010, 0)     60
(2010, 1)     50
(2010, 2)     52
(2010, 3)     49

对于更有用的索引,您可以从元组创建一个MultiIndex:

In [13]: year_hour_means.index = pd.MultiIndex.from_tuples(year_hour_means.index,
                                                           names=['year', 'hour'])

In [14]: year_hour_means
Out[14]:
           Value
year hour
2010 0        60
     1        50
     2        52
     3        49

*如果没有,请先使用set_index

df1 = df.set_index('Date/Time')

答案 1 :(得分:2)

如果您的日期/时间列采用日期时间格式(请参阅dateutil.parser以获取自动解析选项),您可以使用pandas resample,如下所示:

year_hour_means = df.resample('H',how = 'mean')

将使您的数据保持日期时间格式。这可以帮助您完成对数据的任何操作。