android - 在Android应用程序中检测手并分割图像

Question

我开发了一个可捕获和处理图像的android应用程序。我想添加以下功能:

检测用户的手在图像中的位置。具体来说，应用程序将使用它来估计用户指向的位置。

Segment图像，以便仅保留用户手的图像部分。如果这不仅是一些预定义的半径，那就更好了，而是使用用户手附近的一些对象进行分割。

看来 Android OpenCV可以工作，但是我不确定a)是否足够强大以执行此操作以及b)如何将其用于此功能。

Answer 1

这是一个非常广泛的问题，但让我尝试给出一些建议。

通常，您可以将其视为模式检测问题。至关重要的是定义样式异常在您的情况下意味着什么，即您想在图像上检测到哪种手势？如果您的目标是一般地检测到手并且可以假定将要检测到的特定手势，那么我建议您用直的闭合手指进行操作:

这是为什么的解释。该模式可实际检测到，有一个很好的理由:它具有内部特征，该特征始终在该模式中观察到，并且该特征与背景无关。特征是手指之间的“线”。如您所见，使用闭合的笔直手指可以检测到几个笔直，平行的梯度 vector :

它们与背景无关。特别是，您不能依赖于手的检测边界，因为那里的梯度取决于背景。我认为该方法对于不同的肤色也将是很好的，因为该功能显然是渐变色，与肤色无关。

过去，我一直在研究此类示例的哈尔分类器。结果令人满意。我对分类器进行了数百种正向和数千种否定模式的培训。