ffmpeg音频-视频同步问题(音频优先于视频)-使用x11grab进行屏幕录制时

时间:2018-12-19 07:50:42

标签: ubuntu ffmpeg pulseaudio screencast matroska

在使用以下ffmpeg选项进行屏幕录制时,我始终在视频之前获得音频,但延迟约为几秒钟

ffmpeg cmd:

ffmpeg -y -f x11grab -thread_queue_size 1024 -draw_mouse 0 -video_size 1920x1080 -i :0 -f pulse -thread_queue_size 1024 -i default -c:v libx264 -threads 0 -preset faster -c:a flac -async 1 -vsync 1 -crf 30 -crf_max 33 -f matroska output.mkv

ffprobe输出如下:

$ ffprobe demo.mkv 
ffprobe version 3.4.4-1~16.04.york0 Copyright (c) 2007-2018 the FFmpeg developers
  built with gcc 5.4.0 (Ubuntu 5.4.0-6ubuntu1~16.04.10) 20160609
  configuration: --prefix=/usr --extra-version='1~16.04.york0' --toolchain=hardened --libdir=/usr/lib/x86_64-linux-gnu --incdir=/usr/include/x86_64-linux-gnu --enable-gpl --disable-stripping --enable-avresample --enable-avisynth --enable-gnutls --enable-ladspa --enable-libass --enable-libbluray --enable-libbs2b --enable-libcaca --enable-libcdio --enable-libflite --enable-libfontconfig --enable-libfreetype --enable-libfribidi --enable-libgme --enable-libgsm --enable-libmp3lame --enable-libmysofa --enable-libopenjpeg --enable-libopenmpt --enable-libopus --enable-libpulse --enable-librubberband --enable-librsvg --enable-libshine --enable-libsnappy --enable-libsoxr --enable-libspeex --enable-libssh --enable-libtheora --enable-libtwolame --enable-libvorbis --enable-libvpx --enable-libwavpack --enable-libwebp --enable-libx265 --enable-libxml2 --enable-libxvid --enable-libzmq --enable-libzvbi --enable-omx --enable-openal --enable-opengl --enable-sdl2 --enable-libdc1394 --enable-libdrm --enable-libiec61883 --enable-chromaprint --enable-frei0r --enable-libopencv --enable-libx264 --enable-shared
  libavutil      55. 78.100 / 55. 78.100
  libavcodec     57.107.100 / 57.107.100
  libavformat    57. 83.100 / 57. 83.100
  libavdevice    57. 10.100 / 57. 10.100
  libavfilter     6.107.100 /  6.107.100
  libavresample   3.  7.  0 /  3.  7.  0
  libswscale      4.  8.100 /  4.  8.100
  libswresample   2.  9.100 /  2.  9.100
  libpostproc    54.  7.100 / 54.  7.100
Input #0, matroska,webm, from 'demo.mkv':
  Metadata:
    ENCODER         : Lavf57.71.100
  Duration: 01:00:31.93, start: 0.000000, bitrate: 416 kb/s
    Stream #0:0: Video: h264 (High), yuv420p(progressive), 1920x1080, 29.97 fps, 29.97 tbr, 1k tbn, 59.94 tbc (default)
    Metadata:
      ENCODER         : Lavc57.89.100 libx264
      DURATION        : 01:00:31.928000000
    Stream #0:1: Audio: flac, 48000 Hz, stereo, s16 (default)
    Metadata:
      ENCODER         : Lavc57.89.100 flac
      DURATION        : 01:00:30.912000000

我什至尝试使用avoid_negative_ts标志,但这对同步问题没有帮助。

  

操作系统:Ubuntu-18.04

     

ffmpeg版本:3.4

更新:(使用ffmpeg-4.0) 此后,我将此过程分为两部分,并按如下所示进行了尝试(质量更好,但音频/视频同步仍然是一个问题)

# STEP-1: screen recording
/usr/bin/ffmpeg -y -f x11grab -thread_queue_size 1024 -draw_mouse 0 \
-video_size 1920x1080 -i :91141925 -f pulse -thread_queue_size 1024 \
-i virtual_sink.monitor -c:v libx264rgb -threads 0 -preset ultrafast \
-c:a flac -ac 1 -crf 0 -f matroska output.mkv

# STEP-2: audio/video encoding
/usr/bin/ffmpeg -y -i output.mkv -c:v libx264 -threads 0 \
-preset faster -pix_fmt yuv420p -c:a copy -ac 1 -crf 25 \
-f matroska final_output.mkv

STEP-1在屏幕录制期间使用的CPU少得多,但是音频仍然领先于视频。我使用的显示是xvfb在STEP-1中的显示(因为这是云中的无头机器)

此外,我在STEP-1中尝试将标志-filter_complex aresample=44100 -vsync 1无效。

有人可以帮忙吗!

  

更新2 :(带有git master的最新ffmpeg)

     

成功了!感谢@llogan的有用评论。

1 个答案:

答案 0 :(得分:0)

我遇到了同样的问题(尽管在我的情况下,视频在音频之前)。只需按照建议的 on the Archlinux forumclass AddNoteScreen extends StatefulWidget { @override _AddNoteScreenState createState() => _AddNoteScreenState(); } final titleController = TextEditingController(); final bodyController = TextEditingController(); String noteBodyText = bodyController.text; String noteTitleText = titleController.text; class _AddNoteScreenState extends State<AddNoteScreen> { @override Widget build(BuildContext context) { return Scaffold( appBar: AppBar( title: Text('Note App'), ), body: Column( crossAxisAlignment: CrossAxisAlignment.end, children: [ titleTextField, bodyTextField, Container( padding: EdgeInsets.only( right: 10, bottom: 10, ), child: ElevatedButton( style: ElevatedButton.styleFrom( primary: Colors.amber, ), child: Text( 'Add Note', style: TextStyle(color: Colors.white), ), onPressed: () { noteTitleText = titleController.text; noteBodyText = bodyController.text; Navigator.pop(context,[noteTitleText,noteBodyText]); }, ), ), ], ), ); } } 切换为 -f pulse,即可消除延迟。