opencv - 通用网络摄像机校准

Question

我正在构建一个网站，该网站使用计算机视觉技术做一些很酷的事情，用户使用他们的网络摄像头实时录制和上传视频。为此，我需要相机固有参数和失真参数。考虑到用户上传的视频，我试图找出计算这些的最佳方法。我们无法假设用户可能会上传哪些视频——但一个合理的假设是视频中可能会有人出现。我仍处于这个初始阶段，但我很想知道其他人是如何解决这个问题的。

具体来说，以下是我希望小组中有经验的人可以评论的问题:

• 有哪些算法、库和技术可用于提取市场上任何通用网络摄像头的固有参数和失真参数？ [我说“提取”而不是“校准”是为了包括内在参数只是一种方法调用而无需校准的情况]。
• 一般来说，您观察到市场上提供的网络摄像头的固有参数和失真参数有多大差异？您是否使用单一的固有参数和失真参数来近似它们，或者您遵循了什么方法？
• 在这些场景中可以采用哪些相机自校准方法(如果有)？是否有任何可用的开源或商业库可能会有所帮助？
• 如果我们的目标是使用用户录制和上传的视频来校准网络摄像头，参数中的哪些假设 [例如 fx==fy 或无失真参数] 对您来说有意义且听起来合理？
• 对所有相机的固有参数和失真参数进行合理的近似是否有意义？什么是验证特定网络摄像头的特定固有参数和失真参数有多好的合理方法？
• 还有其他需要考虑的问题吗？

Answer 1

有时我是带来坏消息的人 :) 我现在也是。

对于几乎所有的观点，明确的答案都是“否”、“无”、“不是”等等。只有最后一点，对于其他问题，答案不是否定的，而是一长串:)。

实际上，没有棋盘和一些特定约束的相机校准几乎是不可能的。

在 OpenCV 的拼接模块中可以找到最接近无假设校准的实现。然而，它并不完美，并且不适用于随机视频。试一试。