pd.corrwith帶有不同列名的熊貓數據框

Question

我想以有效的方式在x1和y中的三列中的每一列之間得到pearson r。

似乎pd.corrwith（）只能爲具有完全相同列標籤的列計算此值，例如x和y。

這似乎有點不切實際，因爲我認爲計算不同變量之間的相關性是一個常見問題。

In [1]: import pandas as pd; import numpy as np 

In [2]: x = pd.DataFrame(np.random.randn(5,3),columns=['A','B','C']) 

In [3]: y = pd.DataFrame(np.random.randn(5,3),columns=['A','B','C']) 

In [4]: x1 = pd.DataFrame(x.ix[:,0]) 

In [5]: x.corrwith(y) 
Out[5]: 
A -0.752631 
B -0.525705 
C 0.516071 
dtype: float64 

In [6]: x1.corrwith(y) 
Out[6]: 
A -0.752631 
B   NaN 
C   NaN 
dtype: float64 

Answer 1

你可以做到這一點（與np.random.seed(0)）：

x1 = pd.DataFrame(pd.Series(x.ix[:,0]).repeat(x.shape[1]).reshape(x.shape), columns=x.columns) 
x1.corrwith(y) 

得到這樣的結果：

A -0.509 
B 0.041 
C -0.732 

Answer 2

你可以完成你想要使用什麼DataFrame.corrwith(Series)而不是DataFrame.corrwith(DataFrame)：

In [203]: x1 = x['A'] 

In [204]: y.corrwith(x1) 
Out[204]: 
A 0.347629 
B -0.480474 
C -0.729303 
dtype: float64 

或者，也可以形成x每一列和y每一列之間的相關性的矩陣如下：

In [214]: pd.expanding_corr(x, y, pairwise=True).iloc[-1, :, :] 
Out[214]: 
      A   B   C 
A 0.347629 -0.480474 -0.729303 
B -0.334814 0.778019 0.654583 
C -0.453273 0.212057 0.149544 

唉DataFrame.corrwith()不具有pairwise=True選項。