如何使用OpenCV和Python通过检测到的脸部和眼睛移动鼠标

时间:2016-11-01 04:17:12

标签: opencv computer-vision opencv3.0

我已经设法通过在它们周围绘制周期来检测面部和眼睛,并且在Python教程Python tutorial&帮助下工作正常。 Learn Opencv。现在我想让鼠标(光标)移动,当面部移动,眼睛关闭/打开鼠标点击。 (PYTHON& OPENCV)。请帮助我提供更多关于如何使其有效的想法。 感谢。

检查以下代码:

import cv2
import sys
face_cascade = cv2.CascadeClassifier('haarcascade_frontalface_default.xml')
eye_cascade = cv2.CascadeClassifier('haarcascade_eye.xml')
video_capture = cv2.VideoCapture(0)
while True:
    ret, img = video_capture.read()
    gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
    Face = face_cascade.detectMultiScale(gray, 1.3, 5)
    for (x,y,w,h) in Face:
         cv2.rectangle(img,(x,y),(x+w,y+h),(0,0,255),2)
         roi_gray = gray[y:y+h, x:x+w]
         roi_color = img[y:y+h, x:x+w]
         eyes = eye_cascade.detectMultiScale(roi_gray)
         for (ex,ey,ew,eh) in eyes:
             cv2.rectangle(roi_color,(ex,ey), (ex+ew,ey+eh), (0,255,0), 2)
   # Display the resulting frame
   cv2.imshow('Face and Eye Detected', img)
   if cv2.waitKey(1) & 0xFF == ord('q'):
        break
#cv2.waitKey(0)
video_capture.release()
cv2.destroyAllWindows()    

2 个答案:

答案 0 :(得分:2)

如果您在Windows环境中工作,那么您正在寻找的是python win32api中的SetCursorPos方法。使用:

import win32api
import cv2
import sys
...
for (ex,ey,ew,eh) in eyes:
    win32api.SetCursorPos((ex,ey))
    cv2.rectangle(roi_color,(ex,ey), (ex+ew,ey+eh), (0,255,0), 2)

这会将光标设置为矩形的左上角。如果要将光标移动到矩形的中心,请使用:

win32api.SetCursorPos((ex+ew/2,ey+eh/2))

答案 1 :(得分:0)

使用 pyautogui 模块访问鼠标和键盘控件。 pyautogui非常简单易学,文档是最好的资料来源,无需查看任何类型的视频。接下来,您需要使用开放式简历中可用的contoursArea方法检测眼睛的白色区域(可能是强直性)。当您向左看时,眼睛右侧的白色区域增加,而当白色区域增加时,鼠标必须通过pyautogui中可用的函数pyautogui.moveRel(None,10)

向左移动