c++ - 为什么 OpenCV 只能识别训练图像中的对象？

Question

为了让我的 iOS 应用识别 1 欧元、2 欧元和 0.50 欧元的硬币，我一直在尝试使用 opencv_createsamples 和 opencv_traincascade 创建我自己的 classifier.xml .因此，我从如下短视频中裁剪了 60 张 2 欧元硬币的图像:

然后，我使用 opencv_createsamples 将它们与随机背景组合在一起。我获得了 12000 张与此类似的图像:

然后我运行了以下命令:

opencv_createsamples -img positives/i.jpg -bg negatives.txt -info i.txt -num 210 -maxidev 100 -maxxangle 0.0 -maxyangle 0.0 -maxzangle 0.9 -bgcolor 0 -bgthresh 0 -w 48 -h 48(我从 0 到 60)

cat *.txt > positives.txt

opencv_createsamples -info positives.txt -bg negatives.txt -vec 2.vec -num 12600 -w 48 -h 48

opencv_traincascade -data final -vec 2.vec -bg negatives.txt -numPos 12000 -numNeg 3000 -numStages 20 -featureType LBP -precalcValBufSize 2048 -precalcIdxBufSize 2048 -minHitRate 0.999 -maxFalseAlarmRate 0.5 -w 48 -h 4

训练在第 13 个阶段停止。当我得到一个 cascade.xml 后，我立即尝试(使用 detectMultiScale())在我的智能手机拍摄的一张简单图像上，但没有检测到任何东西:

而如果我将其中一张用作训练的图像作为输入，则效果非常好:

我真的不明白为什么会这样，这让我发疯，最重要的是因为几周来我一直在努力让它发挥作用……你能告诉我我在哪里犯了错误吗？

我写的小程序在这里:

#include "opencv2/opencv.hpp"

using namespace cv;

int main(int, char**) {

Mat src = imread("2b.jpg");

Mat src_gray;

std::vector<cv::Rect> money;

CascadeClassifier euro2_cascade;

cvtColor(src, src_gray, CV_BGR2GRAY );
equalizeHist(src_gray, src_gray);

if ( !euro2_cascade.load( "cascade.xml" ) ) {
    printf("--(!)Error loading\n");
    return -1;
}

euro2_cascade.detectMultiScale( src_gray, money, 1.1, 3, 0|CASCADE_SCALE_IMAGE/*CV_HAAR_FIND_BIGGEST_OBJECT | CV_HAAR_SCALE_IMAGE*/, cv::Size(10, 10),cv::Size(2000, 2000) );
printf("%d\n", int(money.size()));

for( size_t i = 0; i < money.size(); i++ ) {
    cv::Point center( money[i].x + money[i].width*0.5, money[i].y + money[i].height*0.5 );
    ellipse( src, center, cv::Size( money[i].width*0.5, money[i].height*0.5), 0, 0, 360, Scalar( 255, 0, 255 ), 4, 8, 0 );
}

namedWindow( "Display window", WINDOW_AUTOSIZE );
imwrite("result.jpg",src);
}

我也尝试考虑 feature homography对于我的 OpenCV 3.1 版。因此，我为我的版本下载了 opencv_contrib 并尝试编译 xfeatures2d 模块，但是我在 CMakeList 文件中遇到了 CMake 错误......而且 xfeature2d 甚至不存在于 xcode 的 opencv 框架中，所以即使我让它在我的电脑上工作，我也可以无论如何不要在 iOS 中使用它...

更新

按照建议，我刚刚尝试删除 equalizeHist(src_gray, src_gray); 并且我在 detectMultiScale()`` 中设置了邻居的数量，这就是我得到的:

更新 2

正如有人建议的那样，关注 this教程 我刚刚使用裁剪后的正面图像创建了一个 .vec 文件，这些图像只有硬币。我使用了这个命令:

opencv_createsamples -vec i.vec -w 48 -h 48 -num 210 -img ./positives/i.jpg -maxidev 100 -maxxangle 0 -maxyangle 0 -maxzangle 0.9 -bgcolor 0 -bgthresh 0(我从 0 到 60)

如您所见，没有使用背景图像来创建示例。然后，下载后mergevec.py ，我将所有 vector 文件组合在一起。现在我要启动另一个 LBP 培训......我希望它会更好

Answer 1

您的级联未正确训练。您不仅应该为您的硬币添加不同的背景，还应该添加不同的比例和 3 个角度的不同旋转。还为训练添加更多负数(你有许多小检测，这意味着级联未针对负数进行训练)