-12909错误解码h264流与内部刷新

Question

我正在创建一个使用video-toolbox解码h264流的iOS应用。我在PC上使用ffmpeg创建流并使用RTP将其发送到iPhone。当我使用此命令创建它时，它工作得很好：

ffmpeg -y -f:v rawvideo -c:v rawvideo -s 1280x720 -pix_fmt bgra -r 30 -an -i - -pix_fmt yuv420p -c:v libx264 -tune zerolatency -preset fast -b:v 5M -refs 1 -g 30 -profile:v high -level 4.1 -f rtp rtp://192.168.1.100:5678

iPhone接收并显示所有帧。但是，当我启用内部刷新

时

-intra-refresh 1

在调用-12909时，

解码失败，错误代码为-8969（模拟器上为VTDecompressionSessionDecodeFrame()）。

我负责处理UDP数据包以提取NAL单元，所以我对这个过程进行了三重检查，并丢弃了这部分代码的问题。

我没有找到任何关于Video-toolbox不支持内部刷新的信息，所以问题是，Video-toolbox是否支持内部刷新？如果确实如此，我是否在ffmpeg方面遗漏了一些使视频工具箱不支持该流的内容？ 除了使用CMVideoFormatDescriptionRef使用SPS和PPS数据创建内容之外，我是否必须向CMVideoFormatDescriptionCreateFromH264ParameterSets()添加内容？

Answer 1

1. 是的，视频工具箱支持内部刷新
2. 不，与ffmpeg无关
3. 不，不需要对CMVideoFormatDescriptionRef
做任何特别的事情

我想通了，每次收到SPS和PPS NALU时我都会创建一个新的VTDecompressionSession，所以解码器正在失去上下文。

它没有内部刷新工作，因为在这种情况下，在SPS和PPS之后立即接收到完整的I帧，因此它不需要来自先前帧的上下文。

启用内部刷新后，只有第一帧是完整的I帧，然后解码器依赖前一帧的上下文，并且必须使用相同的VTDecompressionSession。