TimeGrouper,熊猫

Posted

技术标签:

【中文标题】TimeGrouper,熊猫【英文标题】:TimeGrouper, pandas 【发布时间】:2013-01-12 05:10:45 【问题描述】:

我使用TimeGrouper from pandas.tseries.resample 将每月收益合计为6M,如下所示:

6m_return = monthly_return.groupby(TimeGrouper(freq='6M')).aggregate(numpy.sum)

monthly_return 是这样的:

2008-07-01    0.003626
2008-08-01    0.001373
2008-09-01    0.040192
2008-10-01    0.027794
2008-11-01    0.012590
2008-12-01    0.026394
2009-01-01    0.008564
2009-02-01    0.007714
2009-03-01   -0.019727
2009-04-01    0.008888
2009-05-01    0.039801
2009-06-01    0.010042
2009-07-01    0.020971
2009-08-01    0.011926
2009-09-01    0.024998
2009-10-01    0.005213
2009-11-01    0.016804
2009-12-01    0.020724
2010-01-01    0.006322
2010-02-01    0.008971
2010-03-01    0.003911
2010-04-01    0.013928
2010-05-01    0.004640
2010-06-01    0.000744
2010-07-01    0.004697
2010-08-01    0.002553
2010-09-01    0.002770
2010-10-01    0.002834
2010-11-01    0.002157
2010-12-01    0.001034

6m_return 是这样的:

2008-07-31    0.003626
2009-01-31    0.116907
2009-07-31    0.067688
2010-01-31    0.085986
2010-07-31    0.036890
2011-01-31    0.015283

但是我想得到6m_return 从 7/2008 开始 6m,如下所示:

2008-12-31    ...
2009-06-31    ...
2009-12-31    ...
2010-06-31    ...
2010-12-31    ...

在 TimeGrouper 中尝试了不同的输入选项(即 loffset)但不起作用。 任何建议都将不胜感激!

【问题讨论】:

希望能够执行以下操作:s.resample('2Q-DEC', how='sum') 但似乎不支持六个月(或者可能存在错误)。 loffset 只是更改标签,而不是计算,所以我认为您不想这样做。 @AndyHayden 我认为这是一个奇怪的错误,因为s.index[0] + pd.datetools.QuarterEnd(startingMonth=12) * 2<Timestamp: 2008-12-31 00:00:00>,但是s.resample(pd.datetools.QuarterEnd(startingMonth=12) * 2)2008-09-30 开头。我开了一个ticket 【参考方案1】:

问题可以通过添加close='left'来解决

df.groupby(pd.TimeGrouper('6M', closed = 'left')).aggregate(numpy.sum)

【讨论】:

TimeGrouper 已弃用,请改用Grouper。我在下面的答案中的完整解决方案。【参考方案2】:

在其他答案中建议的TimeGrouper 已弃用,将从Pandas 中删除。它被替换为Grouper。因此,使用Grouper 解决您的问题的方法是:

df.groupby(pd.Grouper(freq='6M', closed='left')).aggregate(numpy.sum)

【讨论】:

【参考方案3】:

这是解决看似错误的解决方法,但请尝试一下,看看它是否适合您。

In [121]: ts = pandas.date_range('7/1/2008', periods=30, freq='MS')

In [122]: df = pandas.DataFrame(pandas.Series(range(len(ts)), index=ts))

In [124]: df[0] += 1

In [125]: df

Out[125]: 
             0
2008-07-01   1
2008-08-01   2
2008-09-01   3
2008-10-01   4
2008-11-01   5
2008-12-01   6
2009-01-01   7
2009-02-01   8
2009-03-01   9
2009-04-01  10
2009-05-01  11
2009-06-01  12
2009-07-01  13
2009-08-01  14
2009-09-01  15
2009-10-01  16
2009-11-01  17
2009-12-01  18
2010-01-01  19
2010-02-01  20
2010-03-01  21
2010-04-01  22
2010-05-01  23
2010-06-01  24
2010-07-01  25
2010-08-01  26
2010-09-01  27
2010-10-01  28
2010-11-01  29
2010-12-01  30

我使用整数来帮助确认总和是否正确。似乎可行的解决方法是在数据框的前面添加一个月,以诱使 TimeGrouper 执行您需要的操作。

In [127]: df2 = pandas.DataFrame([0], index = [df.index.shift(-1, freq='MS')[0]])

In [129]: df2.append(df).groupby(pandas.TimeGrouper(freq='6M')).aggregate(numpy.sum)[1:]
Out[129]: 
              0
2008-12-31   21
2009-06-30   57
2009-12-31   93
2010-06-30  129
2010-12-31  165

请注意最后的 [1:] 是为了修剪第一组。

【讨论】:

以上是关于TimeGrouper,熊猫的主要内容,如果未能解决你的问题,请参考以下文章

使用 pd.Grouper 按月初分组的熊猫

熊猫:groupby 的问题。错误:'ValueError: Grouper for <something> not 1-dimensional'

使用 Grouper 的 pandas 系列日期时间索引中的月份名称

工作日的熊猫石斑鱼?

熊猫日期和事件

groupby对象熊猫的绝对值的平均值