Question

我必须在着名的奥斯卡自拍图像中对每张脸进行眼睛检测。我尝试在脸上使用Haar Casacades，因为它们大部分是近前缘，但是眼睛检测是完全随机的，没有眼睛正在完全认可。

我已尝试使用相同的haar cascade xml文件对单面图像进行眼睛检测，并且工作正常。

我可以采取哪些步骤来正确检测眼睛？

我可以从这里下载用于眼睛检测的图像：

https://drive.google.com/file/d/0B3jt6sHgpxO-d1plUjg5eU5udW8/view?usp=sharing

以下是我为面部和眼睛检测编写的代码。基本的想法是我首先使用中提琴琼斯算法检测脸部，并在每个脸部内，我尝试检测眼睛。

#include <opencv2/highgui/highgui.hpp>
#include <cv.h>
#include <opencv2/objdetect/objdetect.hpp>
#include <vector>

using namespace cv;
using namespace std;

int x,y,w,h;

int main(int argc, const char** argv)
{
    Mat image = imread("oscarSelfie.jpg",CV_LOAD_IMAGE_UNCHANGED);
    Mat gray_img;
    cvtColor(image, gray_img, CV_BGR2GRAY); 
    string faceCascade_file = "haarcascade_frontalface_alt2.xml";
    string eyeCascade_file = "haarcascade_eye.xml";

    CascadeClassifier faceCascade;
    CascadeClassifier eyeCascade;
        //Cascade classifier is a class which has a method to load the classifier from file
    if( !faceCascade.load( faceCascade_file ) )
        { cout<<"--(!)Error loading\n"; return -1; };
    //If it returns zero, it means an error has occured in loading the classifier

    if( !eyeCascade.load( eyeCascade_file ) )
        { cout<<"--(!)Error loading\n"; return -1; };

    equalizeHist(gray_img, gray_img);
    //Increases contrast and make image more distingushable

    /***** Detecting Faces in Image *******/
    vector<Rect> faces;
    vector<Rect> eyes;
    //Rect is a class handling the rectangle datatypes
    faceCascade.detectMultiScale(gray_img, faces, 1.1, 1,       0|CV_HAAR_SCALE_IMAGE, Size(30, 30) );
    //faces.size()-it will return number of faces detected
    for( int i = 0; i < faces.size(); i++ )
    {
        x = faces[i].x;
        y = faces[i].y;
        w = faces[i].width;
        h = faces[i].height;
        //Point center( faces[i].x + faces[i].width*0.5, faces[i].y + faces[i].height*0.5 );
        //ellipse( image, center, Size( faces[i].width*0.5, faces[i].height*0.5), 0, 0, 360, Scalar( 255, 0, 255 ), 4, 8, 0 );
        rectangle(image, cvPoint(x,y), cvPoint(x+w,y+h), CV_RGB(0,255,0), 2, 8 );

        /******** Detecting eyes ***********/
    eyeCascade.detectMultiScale(gray_img, eyes, 1.1, 50, 0|CV_HAAR_SCALE_IMAGE, Size(30, 30) );

    for(int j=0; j < eyes.size(); j++)
    {
        Point center( faces[i].x + eyes[j].x + eyes[j].width*0.5, faces[i].y + eyes[j].y + eyes[j].height*0.5 );
        int radius = cvRound( (eyes[j].width + eyes[j].height)*0.25 );
        circle( image, center, radius, Scalar( 255, 0, 0 ), 4, 8, 0 );
    }
}

namedWindow("oscarSelfie :)",  CV_WINDOW_AUTOSIZE);
imshow("oscarSelfie :)", image);
waitKey(0);
destroyWindow("pic"); 
return 0;

} `

Answer 1

我使用facedetect.cpp（使用haarcascade_eye_tree_eyeglasses.xml）

获得以下结果

不要指望找到所有的面孔和眼睛

我还尝试了dlib的face_landmark_detection_ex.cpp来比较结果

dlib有一个额外的功能，可以为您提供如下所示的对齐面

Answer 2

您可能希望使用CLM-framework进行面部地标检测。据我所知，CLM-framework性能令人满意。

系统的一些示例：http://youtu.be/V7rV0uy7heQ

奥斯卡自拍中的眼睛检测

2 个答案: