我目前正在调查Unity中的手势估计而不使用任何昂贵的插件!目前,我已经通过提取手的轮廓实现了一个简单的手部跟踪系统,如下面的链接: https://www.youtube.com/watch?v=4QE5FcUK5ZA
但是,它在所有环境中都不能很好地工作,并且当其他对象在框架中时(例如面部!),往往无法识别手。有没有人有更复杂的手势估计算法?我已经看过使用神经网络,但他们倾向于使用大量的CPU和/或GPU功率,我需要这个是轻量级的,而不是在Unity中滞后。
有人有任何建议吗?
答案 0 :(得分:0)
多层随机森林是一种用于实时手势估计的https://ieeexplore.ieee.org/document/7789644/轻量级方法。
它使用一组专用于角度空间不同区域的回归器。第一层学习如何加权这些专用回归器的输出。
它实现了最新的手部姿势估计,并已被作者用于实时AR应用中。
模型使用轮廓特征,例如您提取的轮廓特征。