编码与格式 / 系统课时
常见编解码格式
常见编解码格式
选择编解码格式时,不能只看“压缩率高不高”,还要同时考虑终端兼容性、编码成本、实时延迟和授权条件。本课将对 AAC、Opus、H.264、H.265 与 AV1 做场景化比较,帮助你建立可直接用于项目选型的判断标准。
学习目标
- 区分音频编码、视频编码与封装格式
- 说清五种常见编解码格式的主要特点
- 根据直播、点播、通话和存档需求完成初步选型
先区分编码格式与封装格式
编码格式负责压缩音频或视频数据,封装格式负责把音视频轨道、字幕、时间戳和元数据组织到同一个文件或数据流中。H.264、H.265 和 AV1 是视频编码格式;AAC 与 Opus 是音频编码格式;MP4、WebM、MKV 和 MPEG-TS 则属于封装格式。
同一种编码可以放入不同封装中,例如 H.264 常见于 MP4、MKV 和 MPEG-TS。反过来,一个 MP4 文件也可能包含 H.264、H.265、AAC 等不同轨道。因此,“能否播放某个 MP4”不仅取决于 MP4 本身,还取决于设备是否支持内部的编码格式。
AAC 与 Opus
AAC 兼容范围广,常见于 MP4、HLS、移动端视频和传统广播链路。它在中高码率音乐与视频配音中表现稳定,硬件解码支持成熟,是需要覆盖大量电视、手机和浏览器时的稳妥选择。
Opus 同时面向语音和音乐,低码率质量、抗网络抖动能力与低延迟表现突出。它支持较宽的码率范围,并能根据内容在语音与音乐编码方式之间调整,因此常用于 WebRTC、在线会议、语音聊天和低延迟互动。
| 维度 | AAC | Opus |
|---|---|---|
| 典型优势 | 兼容性成熟,适合视频分发 | 低延迟、低码率质量好 |
| 常见场景 | MP4、HLS、点播、广播 | WebRTC、会议、语音与互动直播 |
| 浏览器使用 | 常配合 MP4 或 HLS | 常配合 WebM、Ogg 或 WebRTC |
| 选型提醒 | 低码率语音不一定最优 | 老旧硬件和部分传统容器支持较弱 |
需要广泛终端兼容时优先考虑 AAC;强调实时互动、弱网语音或浏览器通话时优先考虑 Opus。实际项目还应确认目标容器、协议和播放器是否支持对应组合。
H.264、H.265 与 AV1
H.264 的最大优势是生态成熟。浏览器、手机、摄像机、硬件编码器和流媒体平台普遍支持它,编码速度也较容易控制。它不是压缩效率最高的格式,但在兼容性、实时性和工程成本之间最均衡。
H.265 也称 HEVC,在相近主观质量下通常能比 H.264 使用更低码率,尤其适合 4K、HDR、监控和大屏视频。不过其浏览器兼容性、授权成本和软编码负载需要单独评估,不能只依据压缩效率做决定。
AV1 面向高压缩效率和开放媒体生态,在点播、超高清与大规模分发中很有吸引力。它的主要代价是编码计算量较高,老旧设备硬件解码支持不足。实时 AV1 已可用于部分新平台,但上线前必须以目标设备实测为准。
| 编码格式 | 压缩效率 | 编码成本 | 兼容性 | 更适合的场景 |
|---|---|---|---|---|
| H.264 | 中等 | 低到中等 | 最广 | 通用直播、短视频、监控、兼容优先项目 |
| H.265 | 较高 | 中到较高 | 中等 | 4K、HDR、存储敏感、受控终端 |
| AV1 | 高 | 较高到很高 | 新设备较好 | 大规模点播、超高清、带宽成本敏感平台 |
这里的“压缩效率”表示达到相近主观质量时所需的相对码率,不代表任何素材都能得到固定比例的节省。动画、体育、暗场噪声和屏幕录制的结果可能明显不同。
按业务场景完成选型
通用直播通常使用 H.264 加 AAC,因为编码延迟可控、硬件支持丰富、播放器覆盖广。浏览器实时通话更适合 Opus,视频可先选择 H.264;只有在目标浏览器和设备明确支持时,再考虑 AV1 以降低带宽。
4K 点播可在 H.265 与 AV1 之间选择。终端受控、已有 HEVC 硬件链路时,H.265 更容易落地;面向新设备、大规模分发且能承担更长编码时间时,AV1 更有长期带宽优势。
兼容性要求复杂时,可以保留多档编码:以 H.264 作为基础版本,再为支持的新设备提供 H.265 或 AV1。选型时至少验证编码耗时、首帧时间、CPU 或 GPU 占用、平均码率、峰值码率和目标设备播放成功率。