augmented-reality - ARCore 对象识别可能吗？

Question

我的目标是将 Material /纹理叠加在我将拥有相同 3d 模型的物理对象(它将是建筑模型)上。该模型将是静态的(如果有帮助，则在 table 上)，但我显然想从任何一侧查看对象。我的物理模型的占地面积往往不小于 15x15cm，可能大到 2-3m^2，但我愿意改变模型的大小以使用 ARCore 的功能。

我知道 ARCore 主要设计用于将数字对象 anchor 定到平坦的水平面上。我的主要问题是，在目前的状态下，它是否能够实现我的最终目标？如果我有这个权利，它会记录物理点云数据并尝试将其与我的数字模型的点云数据匹配，然后将两者重叠在手机屏幕上？

如果这真的不是 ARCore 的用途，那么我应该关注其他替代方案吗？在我看来，这听起来相当简单，但我敢肯定，如果我以一种低效的方式去做，我会脱离我的深度。说到深度，我不想使用深度传感器，因为我的目标设备是手机。

Answer 1

我绝对希望它在 future 成为可能——毕竟没有计算机视觉的 AR 工具包没有那么有用。

不幸的是，根据 ARCore 员工 Ian 的说法，这是 currently not directly supported但您可以尝试通过 glReadPixels 访问像素然后使用 OpenCV用这些图像字节。

引自伊恩:

I can't speak to future plans, but I agree that it's a desirable capability. Unfortunately, my understanding is that current Android platform limitations prevent providing a single buffer that can be used as both a GPU texture and CPU-accessible image, so care must be taken in providing that capability.