Question

我正在尝试使用OpenCV从网络摄像头抓取帧并使用SFML在窗口中显示它们。

VideoCapture以OpenCV的Mat格式返回帧。为了显示帧，SFML需要uint8格式的一维像素阵列，据我所知，它可与uchar互换。该阵列预计表示每像素RGBA 32位。

所以，我有一个uchar数组，我正在循环Mat数据并复制每个像素：

VideoCapture cap(0);
Mat frame;
cap >> frame;

uchar* camData = new uchar[640*480*4];
uchar* pixelPtr = frame.data;
for(int i = 0; i < frame.rows; i++)
{
    for(int j = 0; j < frame.cols; j++)
    {
        camData[i*frame.cols + j + 2] = pixelPtr[i*frame.cols + j + 0]; // B
        camData[i*frame.cols + j + 1] = pixelPtr[i*frame.cols + j + 1]; // G
        camData[i*frame.cols + j + 0] = pixelPtr[i*frame.cols + j + 2]; // R
        camData[i*frame.cols + j + 3] = 255;

    }
}
img.LoadFromPixels(640, 480, camData); //Load pixels into SFML Image object for display

不幸的是，这并不是很有效。该循环中的某些内容是错误的，因为当我加载并显示camData时生成的图像被打乱。

据我所知，循环中的数学运算是错误的，因此像素分配错误，或Mat数据采用的格式不是BGR。

有什么想法吗？

Answer 1

OpenCV可以为您完成所有工作：

VideoCapture cap(0);
Mat frame;
cap >> frame;

uchar* camData = new uchar[frame.total()*4];
Mat continuousRGBA(frame.size(), CV_8UC4, camData);
cv::cvtColor(frame, continuousRGBA, CV_BGR2RGBA, 4);
img.LoadFromPixels(frame.cols, frame.rows, camData);

Answer 2

我更喜欢接受的答案，但这段代码可以帮助您了解正在发生的事情。

 for (int i=0; i<srcMat.rows; i++) {
            for (int j=0; j<srcMat.cols; j++) {
                int index = (i*srcMat.cols+j)*4;
                // copy while converting to RGBA order
                dstRBBA[index + 0] = srcMat[index + 2 ];
                dstRBBA[index + 1] = srcMat[index + 1 ];
                dstRBBA[index + 2] = srcMat[index + 0 ];
                dstRBBA[index + 3] = srcMat[index + 3 ];
            }
        }

Answer 3

对我来说，遵循以下代码：

VideoCapture capture(0);
Mat mat_frame;
capture >> mat_frame; // get a new frame from camera            

// Be sure that we are dealing with RGB colorspace...
Mat rgbFrame(width, height, CV_8UC3);
cvtColor(mat_frame, rgbFrame, CV_BGR2RGB);

// ...now let it convert it to RGBA
Mat newSrc = Mat(rgbFrame.rows, rgbFrame.cols, CV_8UC4);
int from_to[] = { 0,0, 1,1, 2,2, 3,3 };
mixChannels(&rgbFrame, 2, &newSrc, 1, from_to, 4);

结果（newSrc）是一个预乘图像！

OpenCV 2.3：将Mat转换为RGBA像素阵列

3 个答案: