(四)Android通过ffmpeg解码音频

Posted 2023-03-17

参考技术A 音频解码与视频解码的流程大致相同，唯一的区别只有处理帧数据的时候，视频是像素转换并显示，而音频则是重采样并播放。
所以基于这一点，在以后做架构的时候，可以将音频、视频这两部分，相同的逻辑放在共同的父类当中，自身子类则各自处理视频显示和声音播放等逻辑。

然后，就是将重采样后的数据，交给OpenSLES去处理。

OpenSL ES 全称为： Open Sound Library for Embedded Systems，是一个针对嵌入式系统的开放硬件音频加速库，支持音频的采集和播放，它提供了一套高性能、低延迟的音频功能实现方法，并且实现了软硬件音频性能的跨平台部署，大大降低了上层处理音频应用的开发难度。

Object 和 Interface 是OpenSL ES 中的两大基本概念，可以类比为 Java 中的对象和接口。在 OpenSL ES 中， 每个 Object 可以存在一系列的 Interface ，并且为每个对象都提供了一系列的基本操作，如 Realize，GetState，Destroy 等。

重要的一点，只有通过 GetInterface 方法拿到 Object 的 Interface ，才能使用 Object 提供的功能。

这里的例子是播放一个手机里的视频文件，所以只介绍OpenSLES Audio Player 播放音频的过程。

音频播放的大致流程就是这样，其实还有音频录入的功能的，这个以后再介绍。音频的解码，大部分都和视频解码的流程一致，只要你熟悉OpenGLES的几个API和流程，基本都能播放成功。