按小时分组pandas数据帧的问题

时间:2017-08-08 09:19:19

标签: python pandas pandas-groupby

首先,我的数据集如下所示

here

我想要做的是按pickup_datetime小时对我的列进行分组。我在here上找到了相关问题但由于某种原因,解决方案似乎不起作用。我在下面列出了我的尝试。

我首先从这开始:

df["dropoff_datetime"] = pd.to_datetime(df["dropoff_datetime"])
df["pickup_datetime"] = pd.to_datetime(df["pickup_datetime"])

test = df.groupby(df.hour).sum()

我收到以下错误:

AttributeError: 'DataFrame' object has no attribute 'hour'

然后我尝试了这个:

test = df.groupby(df.dropoff_datetime.hour).sum()

我收到以下错误:

AttributeError: 'Series' object has no attribute 'hour'

我有点困惑,因为我的情况似乎与上面提到的问题相同。我不知道为什么我会收到错误。任何帮助将不胜感激

2 个答案:

答案 0 :(得分:5)

我们可以使用Series.dt.hour访问者:

test = df.groupby(df['pickup_datetime'].dt.hour).sum()

以下是描述差异的示例:

In [136]: times = pd.to_datetime(['2017-08-01 13:13:13', '2017-08-01 20:20:20'])

In [137]: times
Out[137]: DatetimeIndex(['2017-08-01 13:13:13', '2017-08-01 20:20:20'], dtype='datetime64[ns]', freq=None)

In [138]: type(times)
Out[138]: pandas.core.indexes.datetimes.DatetimeIndex

In [139]: times.hour
Out[139]: Int64Index([13, 20], dtype='int64')

如上所示DatetimeIndex有"直接" .hour访问者Series datetime dtype有.dt.hour访问者:

In [140]: df = pd.DataFrame({'Date': times})

In [141]: df
Out[141]:
                 Date
0 2017-08-01 13:13:13
1 2017-08-01 20:20:20

In [142]: type(df.Date)
Out[142]: pandas.core.series.Series

In [143]: df['Date'].dt.hour
Out[143]:
0    13
1    20
Name: Date, dtype: int64

如果我们将Date列设置为索引:

In [146]: df.index = df['Date']

In [147]: df
Out[147]:
                                   Date
Date
2017-08-01 13:13:13 2017-08-01 13:13:13
2017-08-01 20:20:20 2017-08-01 20:20:20

它变成了:

In [149]: type(df.index)
Out[149]: pandas.core.indexes.datetimes.DatetimeIndex

所以我们可以再次直接访问它(没有.dt访问者):

In [148]: df.index.hour
Out[148]: Int64Index([13, 20], dtype='int64', name='Date')

答案 1 :(得分:1)

需要.dt,因为使用Series - Series.dt.hour

test = df.groupby(df.dropoff_datetime.dt.hour).sum()

但如果DatetimeIndex,请忽略它 - DatetimeIndex.hour

test = df.groupby(df.index.hour).sum()