Android FFMPEG 开发Android 中使用 FFMPEG 对 MP3 文件进行混音操作

Posted 韩曙亮

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Android FFMPEG 开发Android 中使用 FFMPEG 对 MP3 文件进行混音操作相关的知识,希望对你有一定的参考价值。





一、前置操作 ( 移植 FFMPEG )



参考 【Android FFMPEG 开发】Android 中执行 FFMPEG 指令 博客 ;

在应用的 build.gradle 构建脚本中导入如下依赖 ;

dependencies {
	implementation 'com.writingminds:FFmpegandroid:0.3.2'
}

然后按照 【Android FFMPEG 开发】Android 中执行 FFMPEG 指令 二、Android 中执行 FFMPEG 指令 中的流程进行开发 , 将拼接好的 FFMPEG 指令传入 ffmpeg.execute 方法 ;





二、FFMPEG 混音命令



FFMPEG 混音命令 :

ffmpeg -i 输入文件1 -i 输入文件2 -i 输入文件3 -filter_complex amix=inputs=输入文件个数:duration=混音时间对齐策略:dropout_transition=声音渐弱时间 输出文件

-i : 输入文件的完整绝对路径 ;

amix=inputs=2 : 表示混音文件个数 , 有 2 2 2 个文件进行混音 ;

duration=longest : 设置混音时间对齐策略 , longest 表示最长的音频文件持续时间 , shortest 表示最短输入的持续时间 , first 表示第一个文件的持续时间 ;

dropout_transition=2 : 表示输入流结束时 , 音量从满音量到 0 0 0 音量渐弱 2 2 2 秒消失 ;


Android 中的完整命令 :

-i /data/user/0/com.example.ffmpeg_mix/files/BeardedGrain.mp3 -i /data/user/0/com.example.ffmpeg_mix/files/RainyDay.mp3 -filter_complex amix=inputs=2:duration=longest:dropout_transition=2 /data/user/0/com.example.ffmpeg_mix/files/Mix.mp3

1 1 1 个输入文件是 /data/user/0/com.example.ffmpeg_mix/files/BeardedGrain.mp3 ;

2 2 2 个输入文件是 /data/user/0/com.example.ffmpeg_mix/files/RainyDay.mp3 ;

amix=inputs=2 表示当前有 2 2 2 个输入文件 ;

duration=longest 表示混音时间是最长输入持续时间 ;

dropout_transition=2 表示输入流结束时 , 音量从满音量到 0 0 0 音量渐弱 2 2 2 秒消失 ;

最后混音的输出文件是 /data/user/0/com.example.ffmpeg_mix/files/Mix.mp3 ;


命令分行注释 :

-i /data/user/0/com.example.ffmpeg_mix/files/BeardedGrain.mp3 // 输入文件 1
-i /data/user/0/com.example.ffmpeg_mix/files/RainyDay.mp3 // 输入文件 2
-filter_complex amix=inputs=2:duration=longest:dropout_transition=2 // 混音参数
/data/user/0/com.example.ffmpeg_mix/files/Mix.mp3 // 输出文件




三、Android FFMPEG 混音源代码完整示例



Android FFMPEG 混音源代码完整示例 :

package com.example.ffmpeg_mix

import android.os.Bundle
import android.util.Log
import android.view.View
import android.widget.TextView
import androidx.appcompat.app.AppCompatActivity
import com.github.hiteshsondhi88.libffmpeg.ExecuteBinaryResponseHandler
import com.github.hiteshsondhi88.libffmpeg.FFmpeg
import com.github.hiteshsondhi88.libffmpeg.LoadBinaryResponseHandler
import java.io.File

class MainActivity : AppCompatActivity() {
    val TAG = "MainActivity"

    /**
     * 应用内置存储下的 files 目录
     */
    lateinit var mFilePath: String

    lateinit var ffmpeg: FFmpeg

    override fun onCreate(savedInstanceState: Bundle?) {
        super.onCreate(savedInstanceState)
        setContentView(R.layout.activity_main)

        mFilePath = this.filesDir.toString()

        // 初始化 FFMPEG
        ffmpeg = FFmpeg.getInstance(this)

        // 加载 FFMPEG 可执行文件
        ffmpeg.loadBinary(LoadBinaryResponseHandler())
    }

    /**
     * 拷贝文件
     */
    fun copy(view: View) {
        CommandUtils.copyAssets2File(
            this,
            "BeardedGrain.mp3",
            "${mFilePath}/BeardedGrain.mp3")

        CommandUtils.copyAssets2File(
            this,
            "RainyDay.mp3",
            "${mFilePath}/RainyDay.mp3")

        showText()
    }

    /**
     * 执行混音命令
     */
    fun mix(view: View) {
        var cmd = "-i ${mFilePath}/BeardedGrain.mp3 -i ${mFilePath}/RainyDay.mp3 -filter_complex amix=inputs=2:duration=longest:dropout_transition=2 ${mFilePath}/Mix.mp3"

        Log.i(TAG, "执行命令 : $cmd")

        var cmdArraay = cmd.split(" ").toTypedArray();
        ffmpeg.execute(cmdArraay, object : ExecuteBinaryResponseHandler(){
            override fun onStart() {
                super.onStart()
                Log.i(TAG, "onStart")
            }

            override fun onFinish() {
                super.onFinish()
                Log.i(TAG, "onStart")
                showText()
            }

            override fun onSuccess(message: String?) {
                super.onSuccess(message)
                Log.i(TAG, "onSuccess : $message")
            }

            override fun onProgress(message: String?) {
                super.onProgress(message)
                Log.i(TAG, "onProgress : $message")
            }

            override fun onFailure(message: String?) {
                super.onFailure(message)
                Log.i(TAG, "onFailure : $message")
            }
        })
    }

    /**
     * 显示内置存储目录
     */
    fun showText(){
        var fileString = ""
        var files = File(mFilePath).listFiles()
        files.forEach {
            fileString += "${it}\\n"
        }
        findViewById<TextView>(R.id.text).text = fileString
    }

}

执行结果 : 这是混音正确的输出内容 ;

执行命令 : -i /data/user/0/com.example.ffmpeg_mix/files/BeardedGrain.mp3 -i /data/user/0/com.example.ffmpeg_mix/files/Rain
onStart
onProgress : ffmpeg version n3.0.1 Copyright (c) 2000-2016 the FFmpeg developers
onProgress :   built with gcc 4.8 (GCC)
onProgress :   configuration: --target-os=linux --cross-prefix=/home/vagrant/SourceCode/ffmpeg-android/toolchain-andro
onProgress :   libavutil      55. 17.103 / 55. 17.103
onProgress :   libavcodec     57. 24.102 / 57. 24.102
onProgress :   libavformat    57. 25.100 / 57. 25.100
onProgress :   libavdevice    57.  0.101 / 57.  0.101
onProgress :   libavfilter     6. 31.100 /  6. 31.100
onProgress :   libswscale      4.  0.100 /  4.  0.100
onProgress :   libswresample   2.  0.101 /  2.  0.101
onProgress :   libpostproc    54.  0.100 / 54.  0.100
onProgress : [mp3 @ 0xe8230000] Skipping 0 bytes of junk at 51635.
onProgress : [mjpeg @ 0xe80af400] Changing bps to 8
onProgress : Input #0, mp3, from '/data/user/0/com.example.ffmpeg_mix/files/BeardedGrain.mp3':
onProgress :   Metadata:
onProgress :     encoder         : Lavf57.83.100
onProgress :     album           : 芒种
onProgress :     title           : 芒种
onProgress :     artist          : 步束
onProgress :     disc            : 01
onProgress :     track           : 1
onProgress :   Duration: 00:03:35.48, start: 0.025056, bitrate: 321 kb/s
onProgress :     Stream #0:0: Audio: mp3, 44100 Hz, stereo, s16p, 320 kb/s
onProgress :     Metadata:
onProgress :       encoder         : Lavc57.10
onProgress :     Stream #0:1: Video: mjpeg, yuvj420p(pc, bt470bg/unknown/unknown), 640x640 [SAR 72:72 DAR 1:1], 90k tb
onProgress :     Metadata:
onProgress :       comment         : Media (e.g. label side of CD)
onProgress : [mp3 @ 0xe8230600] Skipping 0 bytes of junk at 18961.
onProgress : [mjpeg @ 0xe80b0400] Changing bps to 8
onProgress : Input #1, mp3, from '/data/user/0/com.example.ffmpeg_mix/files/RainyDay.mp3':
onProgress :   Metadata:
onProgress :     encoder         : Lavf57.83.100
onProgress :   Duration: 00:04:25.85, start: 0.025056, bitrate: 320 kb/s
onProgress :     Stream #1:0: Audio: mp3, 44100 Hz, stereo, s16p, 320 kb/s
onProgress :     Metadata:
onProgress :       encoder         : Lavc57.10
onProgress :     Stream #1:1: Video: mjpeg, yuvj420p(pc, bt470bg/unknown/unknown), 640x640 [SAR 72:72 DAR 1:1], 90k tb
onProgress :     Metadata:
onProgress :       comment         : Media (e.g. label side of CD)
onProgress : [swscaler @ 0xe7f21000] deprecated pixel format used, make sure you did set range correctly
onProgress : [swscaler @ 0xe7f21000] No accelerated colorspace conversion found from yuv420p to rgb24.
onProgress : [mp3 @ 0xe8230c00] Frame rate very high for a muxer not efficiently supporting it.
onProgress : Please consider specifying a lower framerate, a different muxer or -vsync 2
onProgress : Output #0, mp3, to '/data/user/0/com.example.ffmpeg_mix/files/Mix.mp3':
onProgress :   Metadata:
onProgress :     Stream #0:0: Audio: mp3 (libmp3lame), 44100 Hz, stereo, fltp (default)
onProgress :     Metadata:
onProgress :       encoder         : Lavc57.24.102 libmp3lame
onProgress :     Stream #0:1: Video: png, rgb24, 640x640 [SAR 1:1 DAR 1:1], q=2-31, 200 kb/s, 90k fps, 90k tbn, 90k tb
onProgress :     Metadata:
onProgress :       comment         : Media (e.g. label side of CD)
onProgress :       encoder         : Lavc57.24.102 png
onProgress : Stream mapping:
onProgress :   Stream #0:0 (mp3) -> amix:input0 (graph 0)
onProgress :   Stream #1:0 (mp3) -> amix:input1 (graph 0)
onProgress :   amix (graph 0) -> Stream #0:0 (libmp3lame)
onProgress :   Stream #0:1 -> #0:1 (mjpeg (native) -> png (native))
onProgress : Press [q] to stop, [?] for help
onProgress : frame=    1 fps=0.0 q=0.0 size=       0kB time=00:00:00.00 bitrate= 870.5kbits/s speed=0.00213x    
onProgress : frame=    1 fps=0.0 q=0.0 size=       0kB time=00:03:31.41 bitrate=   0.0kbits/s speed=3.25x    
onProgress : frame=    1 fps=0.0 q=0.0 size=       0kB time=00:03:33.00 bitrate=   0.0kbits/s speed=3.25x    
onProgress : frame=    1 fps=0.0 q=0.0 size=       0kB time=00:03:34.57 bitrate=   0.0kbits/s speed=3.25x    
onProgress : Error while filtering: Out of memory
onProgress : frame=    1 fps=0.0 q=-0.0 Lsize=    3995kB time=00:03:35.45 bitrate= 151.9kbits/s speed=3.25x    
onProgress : video:628kB audio:3367kB subtitle:0kB other streams:0kB global headers:0kB muxing overhead: 0.008727%
onSuccess : ffmpeg version n3.0.1 Copyright (c) 2000-2016 the FFmpeg developers
      built with gcc 4.8 (GCC)
      configuration: --target-os=linux --cross-prefix=/home/vagrant/SourceCode/ffmpeg-android/toolchain-android/bin/arm-linux-androideabi- --arch=arm --cpu=cortex-a8 --enable-runtime-cpudetect --sysroot=/home/vagrant/SourceCode/ffmpeg-android/toolchain-android/sysroot --enable-pic --enable-libx264 --enable-libass --enable-libfreetype --enable-libfribidi --enable-libmp3lame --enable-fontconfig --enable-pthreads --disable-debug --disable-ffserver --enable-version3 --enable-hardcoded-tables --disable-ffplay --disable-ffprobe --enable-gpl --enable-yasm --disable-doc --disable-shared --enable-static --pkg-config=/home/vagrant/SourceCode/ffmpeg-android/ffmpeg-pkg-config --prefix=/home/vagrant/SourceCode/ffmpeg-android/build/armeabi-v7a --extra-cflags='-I/home/vagrant/SourceCode/ffmpeg-android/toolchain-android/include -U_FORTIFY_SOURCE -D_FORTIFY_SOURCE=2 -fno-strict-overflow -fstack-protector-all' --extra-ldflags='-L/home/vagrant/SourceCode/ffmpeg-android/toolchain-android/lib -Wl,-z,relro -Wl,-z,now -pie' --extra-libs='-lpng -lexpat -lm' --extra-cxxflags=
      libavutil      55. 17.103 / 55. 17.103
      libavcodec     57. 24.102 / 57. 24.102
      libavformat    57. 25.100 / 57. 25.100
      libavdevice    57.  0.101 / 57.  0.101
      libavfilter     6. 31.100 /  6. 31.100
      libswscale      4.  0.100 /  4.  0.100
      libswresample   2.  0.101 /  2.  0.101
      libpostproc    54.  0.100 / 54.  0.100
    [mp3 @ 0xe8230000] Skipping 0 bytes of junk at 51635.
    [mjpeg @ 0xe80af400] Changing bps to 8
    Input #0, mp3, from '/data/user/0/com.example.ffmpeg_mix/files/BeardedGrain.mp3':
      Metadata:
      Duration: 00:03:35.48, start: 0.025056, bitrate: 321 kb/s
        Stream #0:0: Audio: mp3, 44100 Hz, stereo, s16p, 320 kb/s
        Metadata:
          encoder         : Lavc57.10
        Stream #0:1: Video: mjpeg, yuvj420p(pc, bt470bg/unknown/unknown), 640x640 [SAR 72:72 DAR 1:1], 90k tbr, 90k tbn, 90k tbc
        Metadata:
          comment         : Media (e.g. label side of CD)
    [mp3 @ 0xe8230600] Skipping 0 bytes of junk at 18961.
    [mjpeg @ 0xe80b0400] Changing bps to 8
    Input #1, mp3, from '/data/user/0/com.example.ffmpeg_mix/files/RainyDay.mp3':
      Metadata:
        encoder         : Lavf57以上是关于Android FFMPEG 开发Android 中使用 FFMPEG 对 MP3 文件进行混音操作的主要内容,如果未能解决你的问题,请参考以下文章

Android FFMPEG 开发Android 中使用 FFMPEG 对 MP3 文件进行混音操作

Android FFMPEG 开发Android 中使用 FFMPEG 将 PCM 音频采样转为 MP3 格式

Android FFMPEG 开发Android 中执行 FFMPEG 指令 ( mobile-ffmpeg 开源项目介绍 | 集成 mobile-ffmpeg 框架 )

Android FFMPEG 开发Android 中执行 FFMPEG 指令 ( 集成 mobile-ffmpeg 框架 | 完整代码示例 )

Android NDK开发之旅38--FFmpeg视频添加水印

Android NDK开发之FFmpeg视频添加水印