Microsoft Hololens可以在多大程度上用于检测对象?

时间:2018-01-08 09:13:26

标签: augmented-reality hololens windows-mixed-reality

我正在启动一个项目,调查Hololens在检测3D物体方面的能力(物体有多小?物体必须具有什么形状?)

例如,如果我使用Hololens看鞋子,它能够捕捉到鞋子表面上的所有点吗?我查看了Hololens的规格,并说它有环境理解相机",但这是否意味着它们是3D相机以及它们的精确程度如何?

我问的原因是我通过了一个教程,可以让你查看房间扫描的网格,而椅子和桌子之类的东西看起来像是从地面长出的块状物,而不是自主物体。如果我想让hololens检测到鞋子并用它做一些事情,那么一块肿块就没用了。

我是各种图像/ 3D物体检测的新手,因此非常感谢任何有助于解释其工作原理的资源。

1 个答案:

答案 0 :(得分:4)

本身,Hololens没有检测到物体。它只检测表面。也许,Hololens如果检测到鞋子(即你的地板上有一只鞋子),可能会检测到表面的变化。但你不能(先天)知道它的差异是由一个节目或不完美在场内造成的。

具体:如果你想检测鞋子,我建议你研究Vuforia中的物体检测。如果您想要检测先前给定的对象,这是最简单的方法。

如果你想进一步检测鞋子,网球和其他类型的鞋子,我建议使用任何现有的lib /框架进行AI /机器学习,并训练神经网络中有多个鞋子图像并传递来自HoloLens的照片摄像机并处理神经网络返回的信息。