dataframe moyennes binned, sauter nan

Question

J'ai un dataframe de la structure suivante qui est simplifiée à cause de cette question:

Date  A B 
2016/1/1 nan nan 
2016/1/2 nan nan 
2016/1/3 3 2 
2016/1/4 4 1 
2016/1/5 nan nan 
2016/1/6 6 8 
2016/1/7 7 nan 
2016/1/8 8 3 
2016/1/9 9 5 

Ce que je veux faire est de créer une moyenne binned 3 jours, je peux facilement faire en utilisant

df = df.resample('3D', on='Date').mean() 

Cependant, l'utilisation de cette méthode les valeurs nan sont considérées comme des valeurs nulles et affectent la valeur moyenne comme ceci:

Date  A B 
2016/1/1 nan nan 
2016/1/2 nan nan 
2016/1/3 3 2 

Utilisation df.resample('3D', on='Date').mean() retours:

Date  A B 
2016/1/3 1 2/3 

Où que je souhaite obtenir:

Date  A B 
2016/1/3 3 2 

Lorsque la na valeurs sont ignorées pour le calcul.

Selon la documentation sur .mean() Je devrais être en mesure de skipna valeurs comme indiqué sur la page:

http://pandas.pydata.org/pandas-docs/stable/generated/pandas.Series.mean.html#pandas.Series.mean

Cependant quand je lance ce qui suit:

df = df.resample('3D', on='Date').mean(skipna=True) 

Le le code suivant est renvoyé:

UnsupportedFunctionCall: numpy operations are not valid with resample. Use .resample(...).mean() instead 

Comment puis-je faire pour solv cette erreur et de produire les valeurs moyennes correctes que je désire?

Answer 1

Vous devez:

#mean works perfectly 
df1 = df.resample('3D', on='Date').mean() 
print (df1) 
       A B 
Date     
2016-01-01 3.0 2.0 
2016-01-04 5.0 4.5 
2016-01-07 8.0 4.0 

Pour cumsum et cumcount avec omission des NaN de besoin transform, aussi cumcount est utilisé nombre trick 1 s:

df[['A1','B1']] = df.resample('3D', on='Date').transform('cumsum') 

df[['A2','B2']] = df[['A','B']].mask(df[['A','B']].notnull(), 1) 
df[['A2','B2']] = df.resample('3D', on='Date')[['A2','B2']].transform('cumsum') - 1 
print (df) 
     Date A B A1 B1 A2 B2 
0 2016-01-01 NaN NaN NaN NaN NaN NaN 
1 2016-01-02 NaN NaN NaN NaN NaN NaN 
2 2016-01-03 3.0 2.0 3.0 2.0 0.0 0.0 
3 2016-01-04 4.0 1.0 4.0 1.0 0.0 0.0 
4 2016-01-05 NaN NaN NaN NaN NaN NaN 
5 2016-01-06 6.0 8.0 10.0 9.0 1.0 1.0 
6 2016-01-07 7.0 NaN 7.0 NaN 0.0 NaN 
7 2016-01-08 8.0 3.0 15.0 3.0 1.0 0.0 
8 2016-01-09 9.0 5.0 24.0 8.0 2.0 1.0