使用libav编码时根据经过时间计算帧PTS

Posted

技术标签:

【中文标题】使用libav编码时根据经过时间计算帧PTS【英文标题】:Calculate frame PTS according to elapsed time when encoding with libav 【发布时间】:2021-08-07 16:02:41 【问题描述】:

我正在构建一个库来记录 X11 窗口。为了保持稳定的帧速率,我测量帧之间的经过时间并根据需要等待。当编码过程比预期的帧速率快时它工作得很好,但如果编码较慢并且它无法跟上帧速率,就会发生奇怪的事情:录制的视频看起来“加速”了。

那是因为,10秒的时间跨度和60fps的帧率,应该有600帧,但是电脑太慢,只能录300帧,所以@987654321上应该出现的帧@ 最终出现在 t = x/2,因为我是根据帧数计算 PTS,而不是从开始经过的时间。

我最初使用以下方法计算时基:

    int outputFrameRate = 60;
    double outputFramePeriod = 1.0 / outputFrameRate * 1000;
    AVRational timeBase =  1, outputFrameRate ;

然后我在AVCodecContext 实例中使用它:

    pCodecCtx->time_base = timeBase;

然后,我有一个递增的 framecnt 计数器,用于计算每个输出帧的 pts,如下所示:

    pOutputFrame->pts = av_rescale_q(framecnt, pCodecCtx->time_base, pVideoStream->time_base);

我现在有一个 elapsedTime 变量,其中包含从开始经过的时间(以毫秒为单位)。我将如何使用它来计算pts

【问题讨论】:

【参考方案1】:

将时基设置为1, 1000,并将elapsedTime 传递给rescale 函数。

频率:1/60 => 帧数(一帧持续时间为 1/60 秒;帧率:60) 频率:1/1000 => 毫秒数(一帧的持续时间为 1/1000 秒或一毫秒;帧率:1000)

来自 ffmpeg 文档:

rescale_q 在数学上等价于 a * bq / cq。

帧数以毫秒为单位:

framecnt: 3 (frames)
bq: 1/60
cq: 1/1000
3 * (1/60) / (1/1000) = 50 (ms)

毫秒到帧数:

framecnt: 50 (ms)
bq: 1/1000
cq: 1/60
50 * (1/1000) / (1/60) = 3 (frames)

【讨论】:

以上是关于使用libav编码时根据经过时间计算帧PTS的主要内容,如果未能解决你的问题,请参考以下文章

I,P,B帧和PTS,DTS的关系

libav / FFMPEG以一种编码方式进行流式传输,另存为另一种方式

解决ffmpeg中的时间戳同步问题_day95

音视频-帧、DTS、PTS

libav 生成具有极高帧速率的 MP4 文件

音视频时间戳计算