具有平均时间的熊猫数据透视表

Posted

技术标签:

【中文标题】具有平均时间的熊猫数据透视表【英文标题】:pandas pivot table with average time 【发布时间】:2016-03-20 00:22:20 【问题描述】:

我一直在使用 pandas 对时间序列数据进行分析,并且一直坚持将它们集成到数据透视表中。我在 csv 中有一个数据:

gov start   end
a   2015-12-08T16:05:00.980+03  2015-12-08T16:14:31.765+03
a   2015-12-08T16:07:53.356+03  2015-12-08T16:34:43.413+03
b   2015-12-08T16:08:43.371+03  2015-12-08T16:54:32.257+03
b   2015-12-08T15:56:12.006+03  2015-12-08T17:35:04.499+03

我有一组简单的数据,时间分别为 startend,并由此计算出两者之间的时间差:

piv_t_subset = pd.read_csv('time_test.csv', parse_dates=['start','end'])

piv_t_subset['time_diff'] = piv_t_subset['end'] - piv_t_subset['start']

我可以将时间的独立平均值计算为:

t = piv_t_subset['time_diff'].mean()
print t

0 days 00:18:53.703286

我想用这个时间信息创建一个数据透视表,但是当我尝试时:

pd.pivot_table(piv_t_subset,index=["gov"],values=['time_diff'],aggfunc=[np.mean])

我得到错误:

DataError:没有要聚合的数字类型

我是否需要进行更多预处理才能将其从 timeseries 转换为 float

【问题讨论】:

【参考方案1】:

现在不支持link。

但您可以通过total_secondstimedelta64Series 转换为floatSeries

piv_t_subset['time_diff1'] = [td.total_seconds() for td in piv_t_subset['time_diff']]
print piv_t_subset
  gov                   start                     end
0   a 2015-12-08 13:05:00.980 2015-12-08 13:14:31.765
1   a 2015-12-08 13:07:53.356 2015-12-08 13:34:43.413
2   b 2015-12-08 13:08:43.371 2015-12-08 13:54:32.257
3   b 2015-12-08 12:56:12.006 2015-12-08 14:35:04.499

piv_t_subset['time_diff'] = piv_t_subset['end'] - piv_t_subset['start']

piv_t_subset['time_diff1'] = [td.total_seconds() for td in piv_t_subset['time_diff']]
print piv_t_subset
  gov                   start                     end       time_diff  \
0   a 2015-12-08 13:05:00.980 2015-12-08 13:14:31.765 00:09:30.785000   
1   a 2015-12-08 13:07:53.356 2015-12-08 13:34:43.413 00:26:50.057000   
2   b 2015-12-08 13:08:43.371 2015-12-08 13:54:32.257 00:45:48.886000   
3   b 2015-12-08 12:56:12.006 2015-12-08 14:35:04.499 01:38:52.493000   

   time_diff1  
0     570.785  
1    1610.057  
2    2748.886  
3    5932.493  

print piv_t_subset.groupby('gov').agg('time_diff1':np.mean)
     time_diff1
gov            
a     1090.4210
b     4340.6895

#omit aggfunc, in pivot_table is default numpy.mean
print pd.pivot_table(piv_t_subset,index=["gov"],values=['time_diff1'])
     time_diff1
gov            
a     1090.4210
b     4340.6895

【讨论】:

完美!遗憾的是它没有直接支持,但这很好用!

以上是关于具有平均时间的熊猫数据透视表的主要内容,如果未能解决你的问题,请参考以下文章

熊猫数据透视表选择具有最大值的行

熊猫销售数据透视表

熊猫销售数据透视表

熊猫数据透视表到数据框[重复]

如何组合熊猫数据透视表中的列?

熊猫数据透视表中的小计