FFMPEG音频 - 视频同步问题(视频前的音频) - 使用X11Grab屏幕录制

Question

在使用以下ffmpeg选项屏幕记录时，我始终在视频之前获得音频，延迟在几秒钟内

ffmpeg cmd：

ffmpeg -y -f x11grab -thread_queue_size 1024 -draw_mouse 0 -video_size 1920x1080 -i :0 -f pulse -thread_queue_size 1024 -i default -c:v libx264 -threads 0 -preset faster -c:a flac -async 1 -vsync 1 -crf 30 -crf_max 33 -f matroska output.mkv

ffprobe输出下面：

$ ffprobe demo.mkv 
ffprobe version 3.4.4-1~16.04.york0 Copyright (c) 2007-2018 the FFmpeg developers
  built with gcc 5.4.0 (Ubuntu 5.4.0-6ubuntu1~16.04.10) 20160609
  configuration: --prefix=/usr --extra-version='1~16.04.york0' --toolchain=hardened --libdir=/usr/lib/x86_64-linux-gnu --incdir=/usr/include/x86_64-linux-gnu --enable-gpl --disable-stripping --enable-avresample --enable-avisynth --enable-gnutls --enable-ladspa --enable-libass --enable-libbluray --enable-libbs2b --enable-libcaca --enable-libcdio --enable-libflite --enable-libfontconfig --enable-libfreetype --enable-libfribidi --enable-libgme --enable-libgsm --enable-libmp3lame --enable-libmysofa --enable-libopenjpeg --enable-libopenmpt --enable-libopus --enable-libpulse --enable-librubberband --enable-librsvg --enable-libshine --enable-libsnappy --enable-libsoxr --enable-libspeex --enable-libssh --enable-libtheora --enable-libtwolame --enable-libvorbis --enable-libvpx --enable-libwavpack --enable-libwebp --enable-libx265 --enable-libxml2 --enable-libxvid --enable-libzmq --enable-libzvbi --enable-omx --enable-openal --enable-opengl --enable-sdl2 --enable-libdc1394 --enable-libdrm --enable-libiec61883 --enable-chromaprint --enable-frei0r --enable-libopencv --enable-libx264 --enable-shared
  libavutil      55. 78.100 / 55. 78.100
  libavcodec     57.107.100 / 57.107.100
  libavformat    57. 83.100 / 57. 83.100
  libavdevice    57. 10.100 / 57. 10.100
  libavfilter     6.107.100 /  6.107.100
  libavresample   3.  7.  0 /  3.  7.  0
  libswscale      4.  8.100 /  4.  8.100
  libswresample   2.  9.100 /  2.  9.100
  libpostproc    54.  7.100 / 54.  7.100
Input #0, matroska,webm, from 'demo.mkv':
  Metadata:
    ENCODER         : Lavf57.71.100
  Duration: 01:00:31.93, start: 0.000000, bitrate: 416 kb/s
    Stream #0:0: Video: h264 (High), yuv420p(progressive), 1920x1080, 29.97 fps, 29.97 tbr, 1k tbn, 59.94 tbc (default)
    Metadata:
      ENCODER         : Lavc57.89.100 libx264
      DURATION        : 01:00:31.928000000
    Stream #0:1: Audio: flac, 48000 Hz, stereo, s16 (default)
    Metadata:
      ENCODER         : Lavc57.89.100 flac
      DURATION        : 01:00:30.912000000

我什至尝试使用avoid_negative_ts标志，但它没有帮助解决同步问题。

OS：Ubuntu-18.04

ffmpeg版本： 3.4

更新：（带有ffmpeg-4.0）从那以后，我将这个过程分为两个部分，并如下所示（质量更好，但是音频/视频同步仍然是一个问题）

# STEP-1: screen recording
/usr/bin/ffmpeg -y -f x11grab -thread_queue_size 1024 -draw_mouse 0 
-video_size 1920x1080 -i :91141925 -f pulse -thread_queue_size 1024 
-i virtual_sink.monitor -c:v libx264rgb -threads 0 -preset ultrafast 
-c:a flac -ac 1 -crf 0 -f matroska output.mkv
# STEP-2: audio/video encoding
/usr/bin/ffmpeg -y -i output.mkv -c:v libx264 -threads 0 
-preset faster -pix_fmt yuv420p -c:a copy -ac 1 -crf 25 
-f matroska final_output.mkv

步骤1在屏幕录制过程中使用的CPU少得多，但是音频仍领先于视频。我正在使用的显示是 xvfb中的一个步骤1（因为这是云中的无头机器）

另外，我在步骤1中尝试了标志-filter_complex aresample=44100 -vsync 1，无济于事。

有人可以帮忙！

更新2 ：（使用Git Master的最新ffmpeg）

它有效！感谢@llogan的有用评论。

Answer 1

我遇到了相同的问题（尽管在我的情况下，视频在音频领先）。只需在Archlinux论坛上建议的-f pulse切换-f alsa，就删除了延迟。

Answer 2

在更新到Mint 21（aka Ubuntu 22.04）之后，使用-f脉冲捕获FFMPEG捕获ffmpeg捕获-F脉冲在音频中导致视频范围内的音频出现几秒钟。我尝试了一些建议，例如使用-copyts，-ashync 1，-Itsoffset具有不同的值。没有任何纠正问题。

显然有一个引起此问题的错误，它的读物就像"太老了，无法纠正"（https://trac.ffmpeg.org/ticket/10114）。虽然将FFMPEG更新为V5或6可能会解决该问题，但在Mint 21/Ubuntu 22.04上不可用这些版本的简单下载。有几个PPA声称安装V5或6的声称，但由于依赖性问题，它们无法正常工作。另一个选项是从源头进行编译。我在阅读《汇编指南》后决定反对这一点。

在另一个答案中建议将-f pulse更改为-f alsa，纠正了音频同步，但是ffmpeg不了解脉冲源，因此您必须更改指定音频源的方式。尽管" -i默认"有效，但它可能无法选择正确的源。我首先尝试从" arecord -l"列表中指定内部声卡（例如-i hw：card = pch，dev = 0），但这导致了无声音频。

要查找要使用的来源，请使用PACMD CMD：

pacmd list-sources|grep name:|sed -r 's|name:s<(.*)>|1|'
##result##
    alsa_input.usb-MACROSILICON_2109-02.analog-stereo
    alsa_output.pci-0000_00_1b.0.analog-stereo.monitor

在我的情况下，第二行是我需要的来源。要创建一个ffmpeg使用的名称，请在主目录中创建一个.asoundrc文件，该文件将ALSA名称映射到脉冲源。执行此操作后，您需要重新启动或重新启动ALSA并脉冲：

nano ~/.asoundrc
pcm.internal_monitor {
  type pulse
  device alsa_output.pci-0000_00_1b.0.analog-stereo.monitor
}
ctl.internal_monitor {
  type pulse
  device alsa_output.pci-0000_00_1b.0.analog-stereo.monitor
}

如果您正确重新启动了声音系统或PC，则您的新条目（Internal_Monitor）将出现在ALSA列表中：

arecord -L|grep internal
##result##
internal_monitor

现在，将ffmpeg与-i internal_monitor一起选择您的ALSA声源。更改后，命令中只有两个条目：

-f pulse 
##changed to##
-f alsa
-i alsa_output.pci-0000_00_1b.0.analog-stereo.monitor
##changed to##
-i internal_monitor

使用音频中的新型ALSA友好型命令是：

ffmpeg -f alsa -thread_queue_size 1024 
 -i internal_monitor -f x11grab -thread_queue_size 1024 
 -r 30 -s 1280x720 -i :0.0+0,152 
 -acodec aac 
 -vcodec libx264 -preset ultrafast -crf 18 
 -vf format=yuv420p -profile:v main 
 -f mpegts /home/ken/Videos/test.mkv -y