augmented-reality - ARCore – 来自后置 Android 深度摄像头的原始深度数据

Question

我不知道如何从带有后置 ToF 深度传感器的小米红米 Note 8 Pro 获取原始深度数据。

我试过了:

Camera2Format 来自 android samples .没有结果(和 I'm not alone)

从后置摄像头获取物理 ID，如 android developers blog 中所述.没有结果。

ARCore API can't handle depth .

我看到几个类似的问题( one ， two )没有答案。在 Android 中从深度相机捕获原始深度有那么难吗？

Answer 1

原始深度 API 与全深度 API
几天前，在 Google IO 2021 上，宣布了 ARCore 1.24 的新 API – Raw Depth API添加到现有 Full Depth API宣布用于 ARCore 1.18。这个全新的 API 使您能够使用来自 iToF 传感器的原始深度数据。该数据可以通过 16 位缓冲流检索，其中 13 位保留给 depth map 3 位是为 confidence map 保留的.



从现在开始，ARCore 开发人员可以使用原始深度 API 进行精确测量和重建网格的操作。另一方面，Full Depth API 非常适合人物/物体遮挡和场景重新照明目的。
下表比较了三个重要参数:

|------------|--------------------|--------------------|
|            |  "Raw Depth API"   |  "Full Depth API"  |
|------------|--------------------|--------------------|
|  Accuracy  |       Awesome      |         Bad        |
|------------|--------------------|--------------------|
|  Coverage  |   Not all pixels   |     All pixels     |
|------------|--------------------|--------------------|
|  Distance  |    0.5 to 5.0 m    |     0 to 8.0 m     |
|------------|--------------------|--------------------|

ARCore Depth API 列表 supported devices在成长。注意最后一列 Comments - 那里有关于深度 API 支持的信息。