在 ffmpeg 中混合音轨的文件上添加另一个音频

Posted 2023-03-13

【中文标题】在 ffmpeg 中混合音轨的文件上添加另一个音频

【英文标题】：Add another audio over a file with mixed audio tracks in ffmpeg

【发布时间】：2021-06-08 05:57:53

【问题描述】：

我有一个文件，它是通过连接三个不同的文件形成的：a.mp4、b.mp4 和 c.mp4。

do ffmpeg -f concat -i "concat-file.txt" -map 0:v -map 0:a -c:v libx264 -crf 23 -fflags +genpts joined-file.mp4"

之后我运行这个命令，这里提到：How to add a new audio (not mixing) into a video using ffmpeg?

ffmpeg -i joined-file.mp4 -i audio.mp3 -filter_complex "[0:a][1:a]amerge=inputs=2[a]" -map 0:v -map "[a]" -c:v copy -ac 2 -shortest output.mp4

是什么导致了这个问题？

谢谢。 :)

更新：

这是我一直在运行的命令：

ffmpeg -i "middle/b.mp4" -c:v copy -video_track_timescale 30k -c:a aac -ac 6 -ar 44100 -shortest "wrap/b.mp4"
ffmpeg -f concat -i "concat-file.txt" -map 0:v -map 0:a -c:v libx264 -crf 23 -fflags +genpts "joined/abc.mp4"
ffmpeg -i "joined/abc.mp4" -i audio.mp3 -filter_complex "[0:a:0][1:a:0]amerge=inputs=2[a]" -map 0:v -map "[a]" -c:v copy -ac 2 -shortest "final/abc-cmplt.mp4"

这里是“concat-file.txt”：

file 'bits/a.mp4'
file 'wrap/b.mp4'
file 'bits/c.mp4'

所有视频文件a.mp4、b.mp4和c.mp4都有原始音频。在我运行上面的命令之后，联合视频abc-cmplt.mp4 已经为第一部分（a.mp4）和最后一部分（c.mp4）组合了音频（audio.mp3 加上他们自己的）。但是，中间部分只有自己的音频，我尝试添加的额外音频似乎没有与最终联合文件中b.mp4的音频合并。

ffmpeg -i bits/a.mp4 -i wrap/b.mp4 -i bits/c.mp4 的输出：

ffmpeg version 4.2.2 Copyright (c) 2000-2019 the FFmpeg developers
  built with gcc 9.2.1 (GCC) 20200122
  configuration: --enable-gpl --enable-version3 --enable-sdl2 --enable-fontconfig --enable-gnutls --enable-iconv --enable-libass --enable-libdav1d --enable-libbluray --enable-libfreetype --enable-libmp3lame --enable-libopencore-amrnb --enable-libopencore-amrwb --enable-libopenjpeg --enable-libopus --enable-libshine --enable-libsnappy --enable-libsoxr --enable-libtheora --enable-libtwolame --enable-libvpx --enable-libwavpack --enable-libwebp --enable-libx264 --enable-libx265 --enable-libxml2 --enable-libzimg --enable-lzma --enable-zlib --enable-gmp --enable-libvidstab --enable-libvorbis --enable-libvo-amrwbenc --enable-libmysofa --enable-libspeex --enable-libxvid --enable-libaom --enable-libmfx --enable-amf --enable-ffnvcodec --enable-cuvid --enable-d3d11va --enable-nvenc --enable-nvdec --enable-dxva2 --enable-avisynth --enable-libopenmpt
  libavutil      56. 31.100 / 56. 31.100
  libavcodec     58. 54.100 / 58. 54.100
  libavformat    58. 29.100 / 58. 29.100
  libavdevice    58.  8.100 / 58.  8.100
  libavfilter     7. 57.100 /  7. 57.100
  libswscale      5.  5.100 /  5.  5.100
  libswresample   3.  5.100 /  3.  5.100
  libpostproc    55.  5.100 / 55.  5.100
Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'bits/a.mp4':
  Metadata:
    major_brand     : mp42
    minor_version   : 0
    compatible_brands: mp42mp41
    creation_time   : 2021-03-10T08:50:04.000000Z
  Duration: 00:00:01.05, start: 0.000000, bitrate: 1846 kb/s
    Stream #0:0(eng): Video: h264 (Main) (avc1 / 0x31637661), yuv420p, 1080x1920 [SAR 1:1 DAR 9:16], 1462 kb/s, 30 fps, 30 tbr, 30k tbn, 60 tbc (default)
    Metadata:
      creation_time   : 2021-03-10T08:50:04.000000Z
      handler_name    : ?Mainconcept Video Media Handler
      encoder         : AVC Coding
    Stream #0:1(eng): Audio: aac (LC) (mp4a / 0x6134706D), 48000 Hz, stereo, fltp, 317 kb/s (default)
    Metadata:
      creation_time   : 2021-03-10T08:50:04.000000Z
      handler_name    : #Mainconcept MP4 Sound Media Handler
Input #1, mov,mp4,m4a,3gp,3g2,mj2, from 'wrap/b.mp4':
  Metadata:
    major_brand     : isom
    minor_version   : 512
    compatible_brands: isomiso2avc1mp41
    encoder         : Lavf58.29.100
  Duration: 00:00:27.93, start: 0.000000, bitrate: 234 kb/s
    Stream #1:0(und): Video: h264 (High) (avc1 / 0x31637661), yuv420p, 1080x1920, 231 kb/s, 30 fps, 30 tbr, 30k tbn, 60 tbc (default)
    Metadata:
      handler_name    : VideoHandler
Input #2, mov,mp4,m4a,3gp,3g2,mj2, from 'bits/c.mp4':
  Metadata:
    major_brand     : mp42
    minor_version   : 0
    compatible_brands: mp42mp41
    creation_time   : 2021-03-10T08:42:52.000000Z
  Duration: 00:00:01.05, start: 0.000000, bitrate: 1829 kb/s
    Stream #2:0(eng): Video: h264 (Main) (avc1 / 0x31637661), yuv420p, 1080x1920 [SAR 1:1 DAR 9:16], 1320 kb/s, 30 fps, 30 tbr, 30k tbn, 60 tbc (default)
    Metadata:
      creation_time   : 2021-03-10T08:42:52.000000Z
      handler_name    : ?Mainconcept Video Media Handler
      encoder         : AVC Coding
    Stream #2:1(eng): Audio: aac (LC) (mp4a / 0x6134706D), 48000 Hz, stereo, fltp, 317 kb/s (default)
    Metadata:
      creation_time   : 2021-03-10T08:42:52.000000Z
      handler_name    : #Mainconcept MP4 Sound Media Handler

【问题讨论】：

嗨@llogan。 :) 我尝试了很多方法，并了解了更多关于正在发生的事情的信息。我现在将更详细地更新问题。

@llogan 我已经更详细地更新了这个问题。 :)

@llogan 请稍候。我应该在命令行中输入ffmpeg -i bits/a.mp4 -i wrap/b.mp4 -i bits/c.mp4 吗？

@llogan 我已经添加了输出。 :)

【参考方案1】：

由concat demuxer 连接的所有文件都必须有these same attributes。 b.mp4 具有不同的 H.264 配置文件并且缺少音频。修复：

ffmpeg -i "middle/b.mp4" -f lavfi -i anullsrc=cl=stereo:r=48000 -c:v libx264 -profile:v main -video_track_timescale 30k -shortest "wrap/b.mp4"

然后连接并混合音频：

ffmpeg -f concat -i "concat-file.txt" -i audio.mp3 -c:v libx264 -crf 23 -filter_complex "[0:a:0][1:a:0]amerge=inputs=2" -ac 2 "joined/abc.mp4"

Option	Description
-f lavfi	Tell ffmpeg the following input is a filter instead of a file.
-i anullsrc=cl=stereo:r=48000	Use the anullsrc filter to generate silent stereo audio with 48000 sample rate.
-profile:v main	Set H.264 Profile to Main.
-video_track_timescale 30k	Set timescale to 30k to match the other videos (30k tbn).

【讨论】：

非常感谢@llogan。 :) 我已经被这个问题困扰了很多天，似乎没有任何效果。你能再澄清一个我的疑问吗？

没有我最初的包装b.mp4视频ffmpeg -i "middle/b.mp4" -c:v copy -video_track_timescale 30k -c:a aac -ac 6 -ar 44100 -shortest "wrap/b.mp4"的命令，它被连接起来，使其以两倍的速度运行，并在其余时间保持在最后一帧。为什么会这样？

@RealNoob 可能不同的时间尺度？还是b.mp4 缺少音频导致的 A/V 不同步？只是猜测。需要查看该命令的完整日志。

@RealNoob H.264 配置文件（h264 (Main) 与 h264 (High)）如我的回答中的链接 #2 中所述。 “有没有一个地方可以让我了解您在答案中列出的不同命令？” 抱歉，我不太明白这个问题。

@RealNoob 哦，你的意思是命令中的选项。我用选项描述更新了答案。