image-processing - 如何消除此视频序列中的噪音？

Question

您好，我正在尝试进行一些图像处理。我使用 Microsoft Kinect 检测房间中的人。我得到深度数据，做一些背景减法工作，当一个人进入场景并四处走动时，最终得到这样的视频序列:

http://www.screenr.com/h7f8

我放了一个视频，以便您可以看到视频中噪音的行为。不同的颜色代表不同的深度级别。白色代表空。正如你所看到的，它非常嘈杂，尤其是红色的噪音。

我需要尽可能地摆脱除人类之外的一切。当我进行腐 eclipse /膨胀(使用非常大的窗口尺寸)时，我可以消除很多噪音，但我想知道是否还有其他方法可以使用。尤其是视频中的红噪声很难使用腐 eclipse /膨胀来消除。

一些注意事项:

1) 如果我们知道场景中何时没有人，就可以进行更好的背景减除，但我们所做的背景减除是全自动的，即使场景中有人，甚至在移动相机等情况下也能正常工作。这是我们现在能得到的最好的背景减法。

2) 该算法将在嵌入式系统上实时工作。所以算法越高效越简单越好。它不必是完美的。虽然也欢迎复杂的信号处理技术(也许我们可能会在另一个不需要嵌入式实时处理的项目中使用它们)。

3)我不需要实际的代码。只是想法。

Answer 1

只是我的两分钱:

如果您不介意为此使用 SDK，那么您可以非常轻松地使用 PlayerIndexBitmask 仅保留人物像素，如 Outlaw Lemur 所示。

现在您可能不想依赖驱动程序，而是希望在图像处理级别上做到这一点。我们在一个项目中尝试过并且效果很好的一种方法是基于轮廓的。我们从背景减法开始，然后假设这是人(因为通常剩下的噪声是非常小的 Blob )我们检测到图像中最大的轮廓，然后我们填充该轮廓并保留它。您还可以使用某种中值过滤作为第一遍。

当然，这并不完美，也不适合所有情况，可能还有很多更好的方法。但我只是把它扔在那里，以防它帮助你想出任何想法。