用分类和数值混合计算距离矩阵

时间:2019-09-10 09:58:09

标签: pandas distance

我有一个包含数字(15个字段)和分类(5个字段)数据的数据框。

我可以创建create distance matrix using own calculation pandas之后的数字字段的完整距离矩阵

我也想包括分类字段。

用作模板:

import scipy
from scipy.spatial import distance_matrix
from scipy.spatial.distance import squareform
from scipy.spatial.distance import pdist
df2=pd.DataFrame({'col1':[1,2,3,4],'col2':[5,6,7,8],'col3':['cat','cat','dog','bird']})
df2
pd.DataFrame(squareform(pdist(df2.values, lambda u, v: np.sqrt((w*(u-v)**2).sum()))), index=df2.index, columns=df2.index)

在平方计算中,我想包括测试np.where(u[2]==v[2], 0, 10)(以及其他分类列)

我会修改lambda函数来执行此测试吗

在这里[0,1]之间的距离

= sqrt((2-1)^2 + (6-5)^2 + (cat - cat)^2)
= sqrt(1 + 1 + 0)

与[0,2]之间的距离

= sqrt((3-1)^2 + (7-5)^2 + (dog - cat)^2)
= sqrt(4 + 4 + 100)

有人可以建议我如何实现此算法吗?

1 个答案:

答案 0 :(得分:0)

import pandas as pd
import numpy as np
from scipy.spatial.distance import pdist, squareform

df2 = pd.DataFrame({'col1':[1,2,3,4],'col2':[5,6,7,8],'col3':['cat','cat','dog','bird']})

def fun(u,v):
    const = 0 if u[2] == v[2] else 10
    return np.sqrt((u[0]-v[0])**2 + (u[1]-v[1])**2 + const**2)

pd.DataFrame(squareform(pdist(df2.values, fun)), index=df2.index, columns=df2.index)

结果:

           0          1          2          3
0   0.000000   1.414214  10.392305  10.862780
1   1.414214   0.000000  10.099505  10.392305
2  10.392305  10.099505   0.000000  10.099505
3  10.862780  10.392305  10.099505   0.000000