我正在为使用Direct3D9Ex界面的应用程序设置VideoRenderer,但是当我使用大纹理(桌面分辨率)时,视频开始变慢。
我当时使用DirectShow,但是我发现H264出现了一些问题,因此决定选择Media Foundation。我已经搜索了很多内容,但是我没有得到如何使用DXVA渲染视频的信息,因此,我使用MF_SOURCE_READER_ENABLE_ADVANCED_VIDEO_PROCESSING和MFVideoFormat_RGB32使用IMFSourceReader(Async)读取示例,以便可以复制到我的曲面上,然后使其正常。
这就是我创建SourceReader的方式。
MFCreateAttributes(&m_Attributes, 4);
m_Attributes->SetUnknown(MF_SOURCE_READER_D3D_MANAGER, GRAPHICSDEVICE->GetDeviceManager());
m_Attributes->SetUnknown(MF_SOURCE_READER_ASYNC_CALLBACK, this);
m_Attributes->SetUINT32(MF_READWRITE_ENABLE_HARDWARE_TRANSFORMS, TRUE);
m_Attributes->SetUINT32(MF_SOURCE_READER_ENABLE_ADVANCED_VIDEO_PROCESSING, TRUE);
MFCreateSourceReaderFromURL(L"Video.mp4", m_Attributes, &m_SourceReader);
MFCreateMediaType(&m_MediaType);
MFSetAttributeSize(m_MediaType, MF_MT_FRAME_SIZE, m_VideoWidth, m_VideoHeight);
m_MediaType->SetGUID(MF_MT_MAJOR_TYPE, MFMediaType_Video);
m_MediaType->SetGUID(MF_MT_SUBTYPE, MFVideoFormat_RGB32);
然后我发布一个ReadSample,并在我的Update方法中这样做:
if (WaitForSingleObject(m_SampleEvent, 0) == WAIT_OBJECT_0)
{
if (m_SourceReader)
{
m_SourceReader->ReadSample(MF_SOURCE_READER_FIRST_VIDEO_STREAM, 0, nullptr, nullptr, nullptr, nullptr);
}
}
这是我的OnReadSample回调的一部分,它仅将一个表面复制到另一个表面。
IDirect3DSurface9 * pSampleSurface = nullptr;
if (SUCCEEDED(GetD3DSurfaceFromSample(Sample, &pSampleSurface)))
{
D3DLOCKED_RECT SampleRect;
if (FAILED(pSampleSurface->LockRect(&SampleRect, nullptr, D3DLOCK_READONLY)))
{
pSampleSurface->Release();
goto Quit;
}
BYTE * pVideo = (BYTE*)SampleRect.pBits;
D3DLOCKED_RECT TextureRect;
if (FAILED(m_Texture->LockRect(0, &TextureRect, nullptr, D3DLOCK_DISCARD)))
{
pSampleSurface->UnlockRect();
pSampleSurface->Release();
goto Quit;
}
BYTE * pDest = (BYTE*)TextureRect.pBits;
for (unsigned int i = 0; i < m_VideoHeight; i++)
{
CopyMemory(pDest, pVideo, m_VideoWidth * 4);
pDest += TextureRect.Pitch;
pVideo += SampleRect.Pitch;
}
m_Texture->UnlockRect(0);
pSampleSurface->UnlockRect();
pSampleSurface->Release();
}
因此,我的实际结果在调试环境中是可以接受的,但是当我将应用程序分辨率更改为桌面分辨率(从800x600到1366x768)时,事情开始变慢了。
我必须使用DXVA吗?我可以调整当前代码以使其运行得更快吗?我在哪里可以找到一些好的样本?
答案 0 :(得分:1)
这里与速度相关的主要因素是能够在GPU上解码为纹理,然后使用该纹理,而无需将数据下载到系统内存中。
您正在做MF_SOURCE_READER_D3D_MANAGER
,最终您从纹理读取数据。因此DXVA已经在为您服务,它应该可以快速运行(也就是说,您本身不需要加速ReadSample
)。 IDirect3DSurface9::LockRect
并且访问位可能很慢,您可能要禁用读取纹理步长并比较性能以进行验证。