编码与格式 / 系统课时

编码时间戳生成

编码时间戳生成

本课解决编码链路中画面顺序正确但封装后快慢异常、音画不同步或时间戳不连续的问题。你将建立“输入帧时间基—编码器时间基—输出流时间基”的换算规则,并写出可直接复用的时间戳处理代码。

学习目标

  • 理解 AVFrame.pts、AVPacket.pts、AVPacket.dts 分别由谁生成
  • 为固定帧率视频生成连续的输入帧时间戳
  • 在写入封装器前把数据包时间戳转换到流时间基

三种时间基如何衔接

编码前,frame->pts 必须使用 AVCodecContext.time_base 表示。固定 25 fps 视频通常设置为 {1, 25},此时相邻两帧的 PTS 差为 1。编码器输出数据包后,包的 PTS、DTS 和 duration 仍处在编码器时间基中,写入封装器前必须转换为 AVStream.time_base。

输入帧到输出数据包的时间戳换算关系

不要根据输出包数量手工递增 packet->pts。存在 B 帧时,编码器会重新排列解码顺序,导致 PTS 与 DTS 不同;此时包时间戳应以编码器返回值为准。应用只负责输入帧的时间戳,以及输出包时间基的统一转换。

生成连续帧时间戳

固定帧率编码最稳妥的做法是维护单调递增的帧序号。下面的完整示例把 25 fps 下的前 5 个帧时间戳,从编码器时间基转换到 MPEG 常用的 90 kHz 流时间基。

c
#include <inttypes.h>
#include <stdio.h>

#include <libavutil/mathematics.h>
#include <libavutil/rational.h>

int main(void) {
    const AVRational encoder_time_base = {1, 25};
    const AVRational stream_time_base = {1, 90000};

    for (int64_t frame_index = 0; frame_index < 5; ++frame_index) {
        // 固定帧率下,帧序号就是编码器时间基中的连续 PTS。
        const int64_t frame_pts = frame_index;
        const int64_t stream_pts = av_rescale_q(
            frame_pts,
            encoder_time_base,
            stream_time_base
        );

        printf("frame=%" PRId64 ", codec_pts=%" PRId64
               ", stream_pts=%" PRId64 "\n",
               frame_index, frame_pts, stream_pts);
    }

    return 0;
}

预期输出

text
frame=0, codec_pts=0, stream_pts=0
frame=1, codec_pts=1, stream_pts=3600
frame=2, codec_pts=2, stream_pts=7200
frame=3, codec_pts=3, stream_pts=10800
frame=4, codec_pts=4, stream_pts=14400

若输入帧来自摄像头或解码器且已有原始时间戳,不应重新从 0 编号,而应使用 av_rescale_q 把源 PTS 转换到编码器时间基。只有没有可信源时间戳的固定帧率数据,才适合直接使用连续帧序号。

接入实际编码循环

下面是编码循环中的片段示例,依赖已经打开的 AVCodecContext、可复用的 AVPacket、目标 AVStream 和封装上下文。关键点是先给帧赋值,再让编码器生成包时间戳,最后统一缩放。

c
int64_t next_frame_pts = 0;

/* 每准备好一帧,就在发送前设置编码器时间基下的 PTS。 */
frame->pts = next_frame_pts++;

int ret = avcodec_send_frame(codec_ctx, frame);
if (ret < 0) {
    return ret;
}

while (ret >= 0) {
    ret = avcodec_receive_packet(codec_ctx, packet);
    if (ret == AVERROR(EAGAIN) || ret == AVERROR_EOF) {
        break;
    }
    if (ret < 0) {
        return ret;
    }

    // 包时间戳由编码器决定;这里只转换时间基,不重新编号。
    av_packet_rescale_ts(
        packet,
        codec_ctx->time_base,
        stream->time_base
    );
    packet->stream_index = stream->index;

    ret = av_interleaved_write_frame(format_ctx, packet);
    av_packet_unref(packet);
    if (ret < 0) {
        return ret;
    }
}

预期结果:写入封装器的数据包使用 stream->time_base,时间戳整体保持单调可解释;启用 B 帧时允许 pts 与 dts 不相等,但不应由业务代码强行改成相同值。

关键边界检查

  • 首帧不一定必须从 0 开始,但同一路流的时间戳必须使用统一基准;需要从 0 开始时,应整体减去首个有效 PTS。
  • AV_NOPTS_VALUE 表示没有有效时间戳,不能直接参与缩放;应回退到帧序号或其他可靠时钟。
  • AVStream.time_base 可能在写文件头后由封装器调整,实际写包时应读取当前值,而不是保存一份旧副本。
  • 可变帧率输入不能简单执行 next_pts++,应按采集时钟或源时间戳换算,否则会把真实间隔压成固定间隔。
按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

编码时间戳生成

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通