image-processing - 3D 重建——如何从 2D 图像创建 3D 模型？

Question

如果我用相机拍照，那么我知道相机到物体的距离，比如房子的比例模型，我想把它变成一个我可以操纵的 3D 模型 所以我可以评论房子的不同部分。

如果我坐下来考虑拍摄不止一张照片，标记方向和距离，我应该能够弄清楚如何做到这一点，但是，我想我会问是否有人有一些可以帮助解释更多的论文。

你用什么语言解释并不重要，因为我正在寻找最好的方法。

现在我正在考虑展示房子，然后用户可以在高度上提供一些帮助，例如从相机到模型该部分顶部的距离，如果有足够的这些，就可以开始计算高度其余的，特别是如果有自上而下的图像，然后从四个侧面的角度拍照，以计算相对高度。

然后零件需要颜色不同，以帮助区分我也期望的模型的各个部分。

Answer 1

研究取得了重大进展，现在可以从 2D 图像中获得漂亮的 3D 形状。例如，在我们最近题为“Synthesizing 3D Shapes via Modeling Multi-View Depth Maps and Silhouettes With Deep Generative Networks”的研究工作中，在解决从 2D 图像中获取 3D 形状的问题方面迈出了一大步。在我们的工作中，我们表明您不仅可以直接从 2D 转到 3D 并获得良好的近似 3D 重建，而且您还可以以有效的方式学习 3D 形状的分布并生成/合成 3D 形状。下面是我们的工作图像，表明我们能够做到 3D重建即使来自单个轮廓或深度图(在左侧)。真实的 3D 形状显示在右侧。



我们采用的方法有一些与认知科学或大脑工作方式相关的贡献:我们构建的模型共享所有形状类别的参数，而不是仅特定于一个类别。此外，它获得一致的表示，并在生成 3D 形状作为输出时考虑输入 View 的不确定性。所以，自然可以给有意义 即使对于非常模糊的输入也会产生结果。如果您查看对我们论文的引用，您会发现在从 2D 图像到 3D 形状方面取得了更多进展。