2016-03-24 168 views
0

這個問題的pandas re-indexing with missing dates大熊貓,切片多指標DF與多個條件

我想計算值的總和爲最近3個月(2015-12,2015-11,2015 - 延續10)。如果股票沒有足夠的數據,即沒有足夠的數據,3個月中有1或2個,那麼我希望那個數量的值是NaN。

我可以切片,並通過和執行求和一組,但這並沒有給我我想要的東西,因爲它可能會排除那些沒有在這三個月內任何數據的股票,然後不考慮股票,有1或2個月。

我想我需要一個多祿聲明,但我周圍的修修補補,並沒有能夠得到我想要的結果。

df2.loc[idx[:,datetime.date(2015,10,1):datetime.date(2015,12,1)],:].groupby(level=0).sum() 
+1

也許發佈一大塊數據框,以便我們可以瞭解它的結構。 – pbreach

回答

0

更新添加一行到您的DF :

使用以下數據幀:

df = pd.DataFrame({ 
'value' : [4,2,5,6,7,8,6,5,4,1,2,4], 
'date': fread_year_month(dt.datetime(2015, 1, 1),dt.datetime(2015, 12, 1)), 
'stock': ['amzn']*12 
},columns=[ 
'value', 'date', 'stock']) 

df2 = pd.DataFrame({ 
'value' : [1]*11, 
'date': fread_year_month(dt.datetime(2015, 1, 1),dt.datetime(2015, 11, 1)), 
'stock': ['msft']*11 
},columns=[ 
'value', 'date', 'stock']) 

df = df.append(df2) 

df.set_index(['stock', 'date'], inplace=True) 

我做了以下內容:

In [1]: idx = pd.IndexSlice 
​In [2]: criterion = df.loc[idx[:,'2015-10-01':'2015-12-01'],:].\ 
groupby(level=0).agg(['count']) > 2 
In [3]: criterion = criterion['value']['count'] 
In [4]: df2 = df.loc[idx[:,'2015-10-01':'2015-12-01'],:].groupby(level=0).sum() 
​In [5]: df3 = pd.DataFrame(columns=['value'], index=criterion[criterion==False].index) 
In [6]: df2[criterion].append(df3, ignore_index=False) 

Out[6]: 
value 
stock 
amzn 7 
msft NaN 

在這個例子中MSFT沒有爲2015-12數據(它只有的3個月內2),將其值設置爲NaN按我的要求。

0

試試這個:

In [142]: df 
Out[142]: 
    value  date stock 
0  4 2015-01-01 amzn 
1  2 2015-02-01 amzn 
2  5 2015-03-01 amzn 
3  6 2015-04-01 amzn 
4  7 2015-05-01 amzn 
5  8 2015-06-01 amzn 
6  6 2015-07-01 amzn 
7  5 2015-08-01 amzn 
8  4 2015-09-01 amzn 
9  1 2015-10-01 amzn 
10  2 2015-11-01 amzn 
11  4 2015-12-01 amzn 
12  7 2015-12-02 amzn 

In [143]: df[(df['date'] >= pd.to_datetime('2015-10-01'))].groupby(df['date'].dt.month).sum() 
Out[143]: 
     value 
date 
10  1 
11  2 
12  11 

注:我故意爲了有至少一個月有超過一排

In [141]: df.loc[12] = [7, pd.to_datetime('2015-12-02'), 'amzn'] 
+0

感謝您的幫助@MaxU。我如何實施條件,如果股票有1個或2個月的時間缺少他們的總和設置爲NaN。 – codingknob