手部特征识别

Question

鉴于手的照片，我正在尝试确定最合适的方法来定位连接手指的手掌位置。 （即手掌上距手掌中心最远的位置，基本上位于手掌之间。）

我一直在考虑一些可能的编码方式，特别是主动形状建模。然而，似乎主动形状建模会过度杀伤，因为我需要的只是找到那些关键点，而不是跟踪它们的运动。我想知道是否有任何熟悉特征识别的人可以提出更合适的技术。感谢。

Answer 1

这是python中的一些示例代码，使用pymorph和mahotas。用opencv重新创建应该是相当简单的。如果可能的话，我会选择不同的背景，距离肤色更远的东西会简化初始阈值。

import pymorph as m
import mahotas

def hsv_from_rgb(image):
    image = image/255.0 
    r, g, b = image[:,:,0], image[:,:,1], image[:,:,2]
    m, M = numpy.min(image[:,:,:3], 2), numpy.max(image[:,:,:3], 2)
    d = M - m

    # Chroma and Value
    c = d
    v = M

    # Hue
    h = numpy.select([c ==0, r == M, g == M, b == M], [0, ((g - b) / c) % 6, (2 + ((b - r) / c)), (4 + ((r - g) / c))], default=0) * 60

    # Saturation
    s = numpy.select([c == 0, c != 0], [0, c/v])

    return h, s, v

image = mahotas.imread('hand.jpg')

#downsample for speed
image = image[::10, ::10, :]

h, s, v = hsv_from_rgb(image)

# binary image from hue threshold
b1 = h<35

# close small holes
b2 = m.closerec(b1, m.sedisk(5))

# remove small speckle
b3 = m.openrec(b2, m.sedisk(5))

# locate space between fingers
b4 = m.closeth(b3, m.sedisk(10))

# remove speckle, artifacts from image frame
b5 = m.edgeoff(m.open(b4))

# find intersection of hand outline with 'web' between fingers
b6 = m.gradm(b3)*b5

# reduce intersection curves to single point (assuming roughly symmetric, this is near the center)
b7 = m.thin(m.dilate(b6),m.endpoints('homotopic'))

# overlay marker points on binary image
out = m.overlay(b3, m.dilate(b7, m.sedisk(3)))

mahotas.imsave('output.jpg', out)