Question

我使用OpenCV通过UDP将摄像机字节发送到另一台计算机。

问题是，相机的帧率仅为15fps。如果我发送图片，它的工作速度超过200fps。

我的相机支持30fps，所以有人知道为什么会这样吗？

这是我的代码：

#include <opencv2/core/core.hpp>
#include <opencv2/highgui/highgui.hpp>
#include <opencv2/imgproc/imgproc.hpp>

#include <iostream>
#include <sys/socket.h>
#include <netinet/in.h>
#include <stdio.h>
#include <fstream>
#include <arpa/inet.h>

#include <unistd.h>

using namespace std;
using namespace cv;

void createSocket(int port, const char* ip);
void sendData(vector<uchar> buff);
int _socket;

struct sockaddr_in serverAdress,clientAdress;


// argv[1] = Bild
int main(int argc, char** argv)
{

    if(argc != 5)
    {
        cout << "Error\n";
        return -1;
    }

    createSocket(atoi(argv[2]),argv[1]);

    vector<uchar> buff;
    vector<int> param = vector<int>(2);


    param[0] = CV_IMWRITE_JPEG_QUALITY;
    param[1] = atoi(argv[3]);


    // VideoCapture
    VideoCapture cap(1);
    cap.set(CV_CAP_PROP_FRAME_WIDTH, 640);
    cap.set(CV_CAP_PROP_FRAME_HEIGHT, 360);


    if(!cap.isOpened())
    {
        cout << "Error\n";
        return -1;
    }


    Mat frame;

    while(true){

        cap >> frame;

        cvtColor(frame, frame, CV_8U);

        imencode(".jpeg",frame, buff,param);
        cout<<"coded file size(jpg)"<<buff.size()<<endl;
        sendData(buff);
    }


    return 0;
}


void createSocket(int port, const char* ip){
    _socket = socket(AF_INET,SOCK_DGRAM,0);

    serverAdress.sin_family = AF_INET;
    serverAdress.sin_addr.s_addr= inet_addr(ip);
    serverAdress.sin_port=htons(port);

    if(_socket == -1){
        cout << "Error";
        return;
    }

}


void sendData(vector<uchar> buff){

    char data[buff.size()];
    for(int i = 0; i < buff.size(); i++){
        data[i] = buff.at(i);
    }

    sendto(_socket,data,buff.size(),0,(struct sockaddr *)&serverAdress,sizeof(serverAdress));
}

Answer 1

虽然30 FPS可能是您相机的理论最大值，但在外面阳光灿烂的日子可以到达。我有一种潜在的怀疑，认为低于标准的采集频率可能是由于照明不足造成的。它需要更多的时间来捕获足够的光子以产生所需质量的图像。我不确定你的收购条件是什么，但随着光线的增强，事情可能会有显着改善。如果您可以访问相机的内部设置，也可以尝试缩短曝光时间。然而，为了保持适当的对比度，需要增加一点增益，图像会产生更多的噪音。

Answer 2

我认为UDP作为每个数据包的最大理论数据大小约为65KB，但是大多数协议将此限制为几百个字节以实现更安全的传输。看到视频以640×360分辨率记录而没有任何压缩，我可以保证每个帧显着超过65KB。因此，期望在受约束的管道中传输的帧速率等于摄像机记录的帧速率是非常不现实的。如果你想在接收器上获得更快的帧速率，要么降低视频的分辨率，要么使用像gstreamer这样的合适的库，它在传输之前提供视频的h.264压缩。

另一个解决方案是通过opencv对每个帧执行一些处理（例如简单的过滤器），这应该有助于减小每个帧的大小

另外，如果您发送图片是什么意思，它的工作速度超过200fps？这句话似乎没有任何意义

OpenCV非常慢 - 摄像头

2 个答案: