来自后置Android深度摄像头的原始深度数据

Question

我不知道如何从带有后置ToF深度传感器的Xiaomi Redmi Note 8 Pro中获取原始深度数据。

我尝试过：

来自android samples的
• Camera2Format。没有结果（和I'm not alone）
如android developers blog中所述，从后置摄像头
• 获取physicalId。没有结果。
• ARCore API can't handle depth。

我看到了几个类似的问题（one，two）却没有答案。在Android的深度相机中捕获原始深度是否如此困难？

Answer 1

原始深度 API 与完整深度 API

几天前，在 Google IO 2021 上，发布了一个新的 ARCore 1.24 API – Raw Depth API 以补充现有的为 ARCore 1.18 发布的 Full Depth API。这个全新的 API 使您能够使用来自 iToF 传感器的原始深度数据。该数据可以通过 16 位缓冲流检索，其中 13 位为 depth map 保留，3 位为 confidence map 保留。

从现在开始，ARCore 开发人员可以使用原始深度 API 进行精确测量和重建网格的操作。另一方面，Full Depth API 非常适合用于人物/物体遮挡和场景重新照明目的。

下表比较了三个重要参数：

|------------|--------------------|--------------------|
|            |  "Raw Depth API"   |  "Full Depth API"  |
|------------|--------------------|--------------------|
|  Accuracy  |       Awesome      |         Bad        |
|------------|--------------------|--------------------|
|  Coverage  |   Not all pixels   |     All pixels     |
|------------|--------------------|--------------------|
|  Distance  |    0.5 to 5.0 m    |     0 to 8.0 m     |
|------------|--------------------|--------------------|

ARCore Depth API supported devices 的列表正在增加。请注意名为 Comments 的最后一列 - 有关深度 API 支持的信息。