Question

我有一个MOV文件，我想解码它并将所有帧都作为单独的图像。

因此，我尝试按以下方式配置未压缩的媒体类型：

// configure the source reader
IMFSourceReader* m_pReader;
MFCreateSourceReaderFromURL(filePath, NULL, &m_pReader);

// get the compressed media type
IMFMediaType* pFileVideoMediaType;
m_pReader->GetCurrentMediaType(MF_SOURCE_READER_FIRST_VIDEO_STREAM, &pFileVideoMediaType);

// create new media type for uncompressed type
IMFMediaType* pTypeUncomp;
MFCreateMediaType(&pTypeUncomp);

// copy all settings from compressed to uncompressed type
pFileVideoMediaType->CopyAllItems(pTypeUncomp);

// set the uncompressed video attributes
pTypeUncomp->SetGUID(MF_MT_SUBTYPE, MFVideoFormat_RGB8);
pTypeUncomp->SetUINT32(MF_MT_ALL_SAMPLES_INDEPENDENT, TRUE);
pTypeUncomp->SetUINT32(MF_MT_INTERLACE_MODE, MFVideoInterlace_Progressive);

// set the new uncompressed type to source reader
m_pReader->SetCurrentMediaType(MF_SOURCE_READER_FIRST_VIDEO_STREAM, 0, pTypeUncomp);

// get the full uncompressed media type
m_pReader->GetCurrentMediaType(MF_SOURCE_READER_FIRST_VIDEO_STREAM, &pTypeUncomp);

我注意到即使我明确地将MF_MT_INTERLACE_MODE设置为MFVideoInterlace_Progressive，最终配置仍使用旧模式MFVideoInterlace_MixedInterlaceOrProgressive进行配置。

然后，我遍历所有样本并查看它们的大小：

IMFSample* videoSample = nullptr;
IMFMediaBuffer* mbuffer = nullptr;
LONGLONG llTimeStamp;
DWORD streamIndex, flags;

m_pReader->ReadSample(
            MF_SOURCE_READER_FIRST_VIDEO_STREAM,
            0,                               // Flags.
            &streamIndex,                    // Receives the actual stream index. 
            &flags,                          // Receives status flags.
            &llTimeStamp,                    // Receives the time stamp.
            &videoSample)                    // Receives the sample or NULL.

videoSample->ConvertToContiguousBuffer(&mbuffer);

BYTE* videoData = nullptr;
DWORD sampleBufferLength = 0;

mbuffer->Lock(&videoData, nullptr, &sampleBufferLength);
cout << sampleBufferLength << endl;

我的样本大小各不相同：从31字节到18000字节。即使将格式更改为MFVideoFormat_RGB32也不会影响样本量。

This问题似乎有同样的问题，但解决方案并没有解决它。

为什么我无法改变隔行扫描以及如何正确解码视频帧以及从样本中获取图像数据的任何帮助？

非常感谢提前。

Answer 1

为了使SourceReader将样本转换为RGB，您需要像这样创建它：

IMFAttributes* pAttr = NULL;
MFCreateAttributes(&pAttr, 1);
pAttr->SetUINT32(MF_READWRITE_ENABLE_HARDWARE_TRANSFORMS, TRUE);
pAttr->SetUINT32(MF_SOURCE_READER_ENABLE_VIDEO_PROCESSING, TRUE);

IMFSourceReader* m_pReader;
throwIfFailed(MFCreateSourceReaderFromURL(filePath, pAttr, &m_pReader), Can't create source reader from url");
pAttr->Release();

稍后，当发生MF_SOURCE_READERF_CURRENTMEDIATYPECHANGED时，您不应该从周期中断。现在，您将拥有相同尺寸的所有样品。否则，您可以使用MFVideoFormat_NV12子类型，然后在创建阅读器时不需要指定MF_SOURCE_READER_ENABLE_VIDEO_PROCESSING属性。注意：仅Windows 8及更高版本支持MF_SOURCE_READER_ENABLE_VIDEO_PROCESSING。

Media Foundation设置视频隔行扫描和解码

1 个答案: