Question

我正在尝试实时发送我的macbook air网络摄像头视频，并在另一台计算机上使用python接收。这样做的动机是能够将实时图像识别任务卸载到服务器。服务器需要访问python中的实时视频帧，以便我可以将帧传递给我的图像识别算法（深度神经网络）。

我能够使用https://github.com/atuldo/videoStream成功完成此操作它使用套接字库以字符串格式发送视频帧。但是，此方法的结果是帧速率非常低（请参阅下面的代码片段）。

尝试1：

from flask import Flask, render_template, Response
from camera import VideoCamera

app = Flask(__name__)

@app.route('/')
def index():
    return render_template('index.html')

def gen(camera):
    while True:
        frame = camera.get_frame()
        yield (b'--frame\r\n'
               b'Content-Type: image/jpeg\r\n\r\n' + frame + b'\r\n\r\n')

@app.route('/video_feed')
def video_feed():
    return Response(gen(VideoCamera()),
                    mimetype='multipart/x-mixed-replace; boundary=frame')

if __name__ == '__main__':
    app.run(host='0.0.0.0', debug=True)

我还使用了这个https://github.com/log0/video_streaming_with_flask_example，它使用flask将视频流式传输到网页。查看chrome中的网页，它的帧速率比我的第一个解决方案好得多。但是，这个解决方案没有收到python中的视频，并且需要我从网页上阅读视频，我不确定该怎么做。

尝试2（我用cv2替换了原始github代码中的pygame，以便能够访问我的mac网络摄像头）：

### Server
import socket
from threading import *
import socket
import pygame
import pygame.camera
from pygame.locals import *

import cv2

def server():
    #host_name = socket.gethostname()
    host_name = 'localhost'
    print "\nServer started at " + str(socket.gethostbyname(host_name)) + " at port " + str(90) 
    #port = 90
    port = 1024
    serversocket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
    serversocket.bind(("",port))
    serversocket.listen(10)
    #pygame.camera.init()
    #cam = pygame.camera.Camera(0,(640,480),"RGB")
    #cam.start()
    #img = pygame.Surface((640,480))
    video = cv2.VideoCapture(0)

    while True:
        connection, address = serversocket.accept()
        print "GOT_CONNECTION"
        #cam.get_image(img)
        #data = pygame.image.tostring(img,"RGB")
        success, image = video.read()
        data = cv2.imencode('.jpg', image)[1].tostring()
        connection.sendall(data)
        connection.close()

server()

###Reciever (snippet, for full code please refer to the github link above)

        clientsocket=socket.socket(socket.AF_INET, socket.SOCK_STREAM)
        clientsocket.connect((self.ipAddress, self.port))
        received = []
        while True:
            recvd_data = clientsocket.recv(230400)
            if not recvd_data:
                break
            else:
                received.append(recvd_data)
        dataset = ''.join(received)
        #image = pygame.image.fromstring(dataset,(640, 480),"RGB") # convert received image from string
        nparr = np.fromstring(dataset, np.uint8)
        image = cv2.imdecode(nparr, cv2.CV_LOAD_IMAGE_COLOR)
        cv2.imwrite('foo.jpg', image)
        #pygame.image.save(image, "foo.jpg")
        self.ids.image_source.reload()

视频流显示在网页上，如下所示：

<html>
  <head>
    <title>Video Streaming Demonstration</title>
  </head>
  <body>
    <h1>Video Streaming Demonstration</h1>
    <img id="bg" src="{{ url_for('video_feed') }}">
  </body>
</html>

如何使用这两种方法中的任何一种获得高帧速率，还是有更好的方法来解决这个问题？

Answer 1

原因可能是您的VideoCapture设备未配置更高的帧速率，或者根本不支持更高的帧速率。

您指定了非常低的帧频，我不知道这对您意味着什么，但是我用2台相机对其进行了测试。通过稍微修改代码，我可以将第一台摄像机的最大速度提高到15fps，但是第二台摄像机以25fps的速度运行没有问题。这些是我的预期数字。

使用Python

1 个答案: