如何确定比例因子,使协方差矩阵的第一个元素为1?

时间:2012-04-05 15:42:44

标签: python scaling covariance svd

我有数据需要居中和缩放,以便以原点为中心。然后需要旋转数据,以使最大方差的方向在x轴上。然后计算数据的均值和协方差。我需要协方差矩阵的第一个元素为1.我认为这是通过调整缩放因子来完成的,但我无法弄清楚缩放因子应该是什么。

为了使数据居中,我取走了平均值,并且旋转我使用SVD,但缩放仍然是我的问题。

signature = numpy.loadtxt(name, comments = '%', usecols = (0,cols-1))
signature = numpy.transpose(signature)

#SVD to get D so that data can be scaled by 1/(highest singular value in D)
U, D, Vt = numpy.linalg.svd( signature , full_matrices=0)
cs = utils.centerscale(signature, scale=False)
signature = cs[0]
#plt.scatter(cs[0][0],cs[0][1],color='r')

#SVD so that data can be rotated so that direction of most variance is on x-axis
U, D, Vt = numpy.linalg.svd( signature , full_matrices=0)
cs = utils.centerscale(signature, center=False, scalefactor=D[0])
U, D, Vt = numpy.linalg.svd( cs[0] , full_matrices=0)
D = numpy.diag(D)
norm = numpy.dot(D,Vt)

以下是 norm 的平均值和cov结果的示例(测试用例使用res)。

**********************************************************************
Failed example:
print numpy.mean(res, axis=1)
Expected:
[  7.52074907e-18  -6.59917722e-18]
Got:
[ -1.22008884e-17   2.41126563e-17]
**********************************************************************
Failed example:
print numpy.cov(res, bias=1)
Expected:
[[  1.00000000e+00   9.02112676e-18]
 [  9.02112676e-18   1.40592827e-01]]
Got:
[[  4.16666667e-03  -1.57698124e-19]
 [ -1.57698124e-19   5.85803446e-04]]
**********************************************************************
1 items had failures:
2 of   4 in __main__.processfile
***Test Failed*** 2 failures.

除协方差矩阵的第一个元素外,所有值都无关紧要,需要为1。

我试过到处寻找并找不到答案。任何帮助,将不胜感激。

1 个答案:

答案 0 :(得分:0)

我不知道utils.centerscale是什么或者做什么,但是如果你想用一个常数因子来缩放矩阵,使得它的协方差矩阵的左上角是1,你可以简单地将矩阵除以正方形未缩放协方差项的根:

>>> import numpy
>>> numpy.random.seed(17)
>>> m = numpy.random.rand(5,4)
>>> m
array([[ 0.294665  ,  0.53058676,  0.19152079,  0.06790036],
       [ 0.78698546,  0.65633352,  0.6375209 ,  0.57560289],
       [ 0.03906292,  0.3578136 ,  0.94568319,  0.06004468],
       [ 0.8640421 ,  0.87729053,  0.05119367,  0.65241862],
       [ 0.55175137,  0.59751325,  0.48352862,  0.28298816]])
>>> c = numpy.cov(m,bias=1)
>>> c
array([[ 0.0288779 ,  0.00524455,  0.00155373,  0.02779861,  0.01798404],
       [ 0.00524455,  0.00592484, -0.00711072,  0.01006019,  0.00631144],
       [ 0.00155373, -0.00711072,  0.13391344, -0.10551922,  0.00945934],
       [ 0.02779861,  0.01006019, -0.10551922,  0.11250984,  0.00982862],
       [ 0.01798404,  0.00631144,  0.00945934,  0.00982862,  0.01444482]])
>>> numpy.cov(m/c[0][0]**0.5, bias=1)
array([[ 1.        ,  0.18161135,  0.05380354,  0.96262562,  0.62276138],
       [ 0.18161135,  0.20516847, -0.24623392,  0.3483699 ,  0.21855613],
       [ 0.05380354, -0.24623392,  4.63722877, -3.65397781,  0.32756326],
       [ 0.96262562,  0.3483699 , -3.65397781,  3.89605297,  0.34035085],
       [ 0.62276138,  0.21855613,  0.32756326,  0.34035085,  0.5002033 ]])

但这与简单地将协方差矩阵除以左上角成员具有相同的效果:

>>> (numpy.cov(m,bias=1)/numpy.cov(m,bias=1)[0][0])/(numpy.cov(m/c[0][0]**0.5, bias=1))
array([[ 1.,  1.,  1.,  1.,  1.],
       [ 1.,  1.,  1.,  1.,  1.],
       [ 1.,  1.,  1.,  1.,  1.],
       [ 1.,  1.,  1.,  1.,  1.],
       [ 1.,  1.,  1.,  1.,  1.]])

根据您正在做的事情,您可能也会对numpy.corrcoef感兴趣,而{{1}}会提供相关系数矩阵。