使用网络摄像头/第二网络摄像头注册/覆盖kinect深度配置文件

Question

我想使用Kinect的红外传感器检测移动物体，并将深度剖面视图从kinect覆盖到网络摄像头视图上。理想情况下，我还想用外部网络摄像头注册kinect图片。

有关如何入门的任何示例？

Answer 1

如果要匹配RGB和深度流，则需要进行立体声校准。关于Kinect本身，它取决于您正在使用的库/驱动程序，因为可能已经为您构建了功能，允许您为深度图像上的相同x，y值获取正确的RGB值。 例如：

• 使用KinectSDK：MapDepthFrameToColorFrame
• 使用OpenNI：AlternativeViewPoint
• with libfreenect：freenect_pixel_from_depth_map

还有一些包装库可以简化一些事情。例如ofxKinect作为setRegistration()方法。

如果您想使用外部网络摄像头，则需要先进行校准。你可以在Niccolas Burrus' wiki找到一些方便的文章。我还建议您查看RGBDToolkit项目，因为它可以满足您的需求，但使用的是DSLR相机。原则是相同的。

以下是一些有关校准的资源：

• OpenCV tutorial
• utility app
• Depth calibration paper