android - 在 Android 应用程序中从图像构造 3D 几何图形

Question

我们已经进行了开发智能手机/平板电脑应用程序(最好是 Android 应用程序)的需求可行性研究，该应用程序应该能够执行以下操作

• 首先，用户会使用带有摄像头的平板电脑或智能手机行走，在建筑物内部绘制整个建筑物或房间的 map 。

• 应用程序应该能够识别房间的边缘并用它制作一个 3D 结构。

• 稍后用户应该能够看到用它创建的 3D 布局。这3D 布局可以导出为标准文件格式，例如 igs、dwg、stp 平行固体等

• 然后用户将更改 3D 布局，例如添加窗口或者用一些附加注释等标记某个地方。这个新的图表将被导入回智能手机应用程序中。

• 用户将再次带着新的元素穿过建筑物或房间导入布局(新建议的窗口或标记讲述厕所等)强加的。布局应随着用户的更新而更新步行/转弯。

我正在探索 2D 框的“边缘检测”算法，我想知道如何计算深度和检测方向，以及有关是否有人从事此类项目的更多信息。

我更喜欢实时 super 有气势的，就像Sudoku puzzle solved in Matlab 。比Sudoku puzzle solved by Google

由于这是可行性研究分析，因此我想在深入研究各个方面之前先发表此文章。这可行吗？我需要注意哪些事情，我需要哪些应用程序等等。

如果这不是提问的正确位置，请指出正确的位置

Answer 1

通常情况下，您所说的内容是通过带有内置深度传感器(如 Microsoft Kinect 传感器)的设备完成的。 Kinect Fusion是一款接受深度输入并将其转换为完整 3D 模型的软件。

其他传感器选项包括 LIDAR ，我认为这是一款用于收集深度数据的高端激光扫描仪。

W.r.to 你的问题 - 从移动设备相机上录制的视频重建 3d 模型 - 这在很大程度上是一个研究问题。我不相信有任何现成的软件工具可以开箱即用。 迪士尼 最近发布了一个research paper它做的事情与您的要求类似。

我还没有真正读过这篇论文，所以我不知道是否有任何先决条件——在相机能力、光照条件、测量距离等方面。但这是你可以开始的地方可以查看他们的引用资料以获取更多资源。

恕我直言，我相信如果您确实使用深度传感器，而不只是您尝试录制的模型的视频，那么您可以制作工具。后者可能非常容易出错，需要更多的研究。

祝你好运。