依赖类的空间相似度比较？

Question

我有两个带有坐标和类键-值对的字典，我想对其进行比较。每个坐标都附加到一个特定的类（红色或绿色）。我正在考虑类的情况下尝试计算空间布置之间的相似度。

例如，我想找到右侧坐标与左侧坐标的相似度：

我想解决这个问题的想法是找到每个坐标的最近邻居，并检查它们与具有相似最近邻居的坐标的匹配程度。但是我看到的问题是找到哪个坐标对应于另一幅图像中的坐标。

执行此操作的最佳方法是什么？