Android音视频相关知识

Posted 2021-08-04 lgz0921

多媒体：文字、图片、音频、视频

滤镜：像素值改动

变速：帧率的改动

像素：像素指由图像的小方格组成的，这些小方块都有一个明确的位置和被分配的色彩数值（RGB），小方格颜色和位置就决定该图像所呈现出来的样子。

码率（比特率）：大小/时间

分辨率：360p、540p、720p、1080p、4k

同分辨率多码率：normal、low、high、lowest

质量：压缩后的清晰度 PSNR、SSIM、VMAF

IBP帧（视频编码技术）：I帧：独自编码，不依赖其他帧，通常是场景变换（镜头cut）帧

                                          B帧：参考和依赖前后两帧

                                          P帧：参考和依赖前一帧

容器：MP4、FLV、MKV

视频流编解码器：H264/AVC、H265/HEVC、H266/VVC

音频流编解码器：AAC、MP3、AMR

不同流/轨道之间以时间戳同步

FFmpeg：开源的多媒体处理框架

DASH：分片，解决长视频起播慢的问题、根据网络调整码率 类似技术（HLS）

超分算法（优化清晰度）：深度学习、机器学习、普通超分算法

YUV：视频压缩、传输、存储、向后兼容老式黑白电视