Gstreamer画中画 - 两个并行播放的文件

时间:2016-05-30 14:07:30

标签: gstreamer pipeline picture-in-picture

我需要为“画中画”效果构建一个管道来组合来自两个文件的媒体:

1)第一个文件中的视频内容显示在整个窗口中   2)调整第二个文件中的视频大小并显示在窗口的左上角,   3)来自两个文件的音频混合   4)两个文件的内容应该同时播放

到目前为止,我得到了以下管道:

gst-launch-1.0 -e \
  filesrc name="src0" location=$FILE0 \
    ! decodebin name="decodebin0" ! queue ! videoscale ! capsfilter caps="video/x-raw,width=120" ! videoconvert ! videomixer.sink_0  decodebin0. ! queue ! audioconvert ! audiomixer.sink_0 \
  filesrc name="src1" location=$FILE1 \
    ! decodebin name="decodebin1" ! queue ! videoscale ! capsfilter caps="video/x-raw" ! videoconvert ! videomixer.sink_1  decodebin1. ! queue ! audioconvert ! audiomixer.sink_1 \
   videomixer name="videomixer" ! autovideosink \
   audiomixer name="audiomixer" ! autoaudiosink

然而,它一个接一个地播放流,而不是并行播放。有谁知道应该在这里改变什么才能同时播放流?

Ps:附上可视化的管道图:

1 个答案:

答案 0 :(得分:0)

令人惊讶的是 - 管道中的源的顺序很重要 - 在对管道进行轻微修改并在第一个位置放置具有“较大”框架的源之后,我能够按预期获得结果:

gst-launch-1.0 -ev \
  filesrc name="src1" location=$FILE1 \
   ! decodebin name="decodebin1" ! queue ! videoscale ! capsfilter caps="video/x-raw,framerate=15/1" ! videoconvert ! videomixer.sink_1  decodebin1. ! queue ! audioconvert name="ac1" \
  filesrc name="src0" location=$FILE0 \
   ! decodebin name="decodebin0" ! queue ! videoscale ! capsfilter caps="video/x-raw,width=120,framerate=15/1" ! videoconvert ! videomixer.sink_0  decodebin0. ! queue ! audioconvert name="ac0"\
   ac0. ! audiomixer.sink_0 \
   ac1. ! audiomixer.sink_1 \
  videomixer name="videomixer" ! autovideosink \
  audiomixer name="audiomixer" ! autoaudiosink \