用openCV检测嘴巴

Question

我试图用openCV检测图像中的嘴，所以我使用以下代码：

#include "face_detection.h"

using namespace cv;

// Function detectAndDisplay
void detectAndDisplay(const std::string& file_name, cv::CascadeClassifier& face_cascade, cv::CascadeClassifier& mouth_cascade)
{
    Mat frame = imread(file_name);
    std::vector<Rect> faces;
    Mat frame_gray;
    Mat crop;
    Mat res;
    Mat gray;

    cvtColor(frame, frame_gray, COLOR_BGR2GRAY);
    equalizeHist(frame_gray, frame_gray);

    // Detect faces
    face_cascade.detectMultiScale(frame_gray, faces, 1.1, 3, 0 | CASCADE_SCALE_IMAGE, Size(30, 30));

    for(unsigned int i=0;i<faces.size();i++)
    {
        rectangle(frame,faces[i],Scalar(255,0,0),1,8,0);
        Mat face  = frame(faces[i]);
        cvtColor(face,face,CV_BGR2GRAY);
        std::vector <Rect> mouthi;
        mouth_cascade.detectMultiScale(face, mouthi);
        for(unsigned int k=0;k<mouthi.size();k++)
        {
        Point pt1(mouthi[k].x+faces[i].x , mouthi[k].y+faces[i].y);
        Point pt2(pt1.x+mouthi[k].width, pt1.y+mouthi[k].height);
        rectangle(frame, pt1,pt2,Scalar(0,255,0),1,8,0);
        }

    }

    imshow("Frame", frame);
    waitKey(33);
}

分类器为haarcascade_frontalface_alt.xml和haarcascade_mcs_mouth.xml。

正确检测到脸部但口腔没有检测到：我还获得了眼睛和其他部位，如额头。 有没有办法只检测嘴巴？

Answer 1

我想我设法解决了这个问题：专注于脸部的下半部分，增加比例因子就可以了，现在我能够以很好的精度检测嘴巴。无论如何，这个任务看起来比面部检测复杂得多，即使我使用的是“简单”的图像，这意味着正面和完整的正面。

以下是两个例子：成功和失败。

Answer 2

我遇到了同样的问题，所以我只专注于脸的下半部分 并从检测到的面部创建ROI。它看起来像这样：

Mat ROI=image(Rect(face.x,face.y+face.height*0.6,face.width,face.height*0.3));

面部是图像中检测到的面部。

这仅从检测到的面部为下半部分创建了ROI。另外口腔探测器也检测到眼睛也是嘴巴。

然后使用此链接中的MouthCascade.xml：http://alereimondo.no-ip.org/OpenCV/34 这比内置的OpenCV效率更高。