使用ARKit 3进行手指和面部跟踪

Question

ARKit 3支持手指跟踪吗？如果是，是否可以将ARKit 3与TrueDepth Camera模块的人脸检测API结合使用，以运动某个手指相对于眼睛，鼻子和嘴巴的位置？ 如果没有，有没有一种简单的方法可以进行手指跟踪，而不必像使用Metal API那样深入？

注意：通过手指跟踪，我的意思是跟踪手指的数量和/或可见的手指。

Answer 1

使用ARKit 3的人体跟踪功能（请参阅Apple的Capturing Body Motion in 3D示例代码），您可能会获得被跟踪物体的手指非常接近的位置，但对人体使用ARBodyTrackingConfiguration跟踪功能，并且在该配置下不支持面部跟踪。此外，手指的关节也不会被跟踪，因此尽管您可以使用被跟踪的关节（即手腕）来获取手指的大概位置，但ARKit不会告诉您哪些手指是伸出或缩回的。