我无法从每小时数据中获取每天的最大值。 原始文件每天每个名称包含24个数据(名称过多)。例如,以下是一个名称的24个数据:
Start Time Period name value
2/23/2019 0:00 60 MBTS_H2145X 100
2/23/2019 1:00 60 MBTS_H2145X 100
2/23/2019 2:00 60 MBTS_H2145X 1
2/23/2019 3:00 60 MBTS_H2145X 1
2/23/2019 4:00 60 MBTS_H2145X 1
2/23/2019 5:00 60 MBTS_H2145X 2324
2/23/2019 6:00 60 MBTS_H2145X 2323
2/23/2019 7:00 60 MBTS_H2145X 2323
2/23/2019 8:00 60 MBTS_H2145X 2323
2/23/2019 9:00 60 MBTS_H2145X 2323
2/23/2019 10:00 60 MBTS_H2145X 2323
2/23/2019 11:00 60 MBTS_H2145X 2323
2/23/2019 12:00 60 MBTS_H2145X 1
2/23/2019 13:00 60 MBTS_H2145X 21
2/23/2019 14:00 60 MBTS_H2145X 21
2/23/2019 15:00 60 MBTS_H2145X 23
2/23/2019 16:00 60 MBTS_H2145X 350
2/23/2019 17:00 60 MBTS_H2145X 323
2/23/2019 18:00 60 MBTS_H2145X 23
2/23/2019 19:00 60 MBTS_H2145X 23
2/23/2019 20:00 60 MBTS_H2145X 2323
2/23/2019 21:00 60 MBTS_H2145X 23
2/23/2019 22:00 60 MBTS_H2145X 23
2/23/2019 23:00 60 MBTS_H2145X 2
我得到的结果是:(这是错误的,应该是2324)
Start Time name max value
0 2/23/2019 MBTS_H2145X 350
我有以下代码,但结果不正确
import dask.dataframe as dd
import numpy as np
import pandas as pd
filename='V.csv'
df = dd.read_csv(filename, dtype='str')
#_________changing date format
df['Start Time'] = df['Start Time'].map(lambda x: pd.to_datetime(x, errors='coerce'))
#_________change to pure date without hour
df['Start Time'] = df['Start Time'].dt.date
grouped_df=(df.groupby(['Start Time','name']).agg({'value':'max'}).rename(columns={'value':'max value'}).reset_index())
grouped_df.to_csv('e1.csv')
print(grouped_df.head(12))
答案 0 :(得分:0)
保持您的代码完全相同。只需将这一行更改为:
grouped_df=(df.groupby(['Start Time','name']).agg({'value':'max'}).rename(columns={'value':'max value'}).reset_index())
更改为:
df.value = pd.to_numeric(df.value)
grouped_df= (df.groupby(['Start Time','name'])['value'].max().rename(columns={'value':'max value'}).reset_index()
df = pd.merge(df, grouped_df, on = ['Start Time','name'])
聚合函数可能会发生某些事情。
或者如果您的DTYPE仅是STRING,则只需添加pd.to_numeric行,并保持其他所有内容不变。