编码与格式 / 系统课时

SRT 与低延迟传输

SRT 与低延迟传输

SRT 面向不稳定网络中的实时音视频传输,在保留 UDP 低等待特性的同时增加丢包恢复和时序控制。本课将建立其可靠传输模型,并用 FFmpeg 在本机完成一条可验证的 SRT 推拉流链路。

学习目标

  • 理解 SRT 如何使用序号、确认和重传恢复丢包
  • 区分 caller、listener 两种连接角色
  • 正确设置 FFmpeg 的 SRT 延迟参数并完成推拉流验证

SRT 解决的问题

直接使用 UDP 发送媒体包时,网络可能出现丢包、乱序和抖动,而 UDP 本身不会补发。SRT 在 UDP 之上增加可靠传输、时间戳交付和可选加密,目标是在实时性与抗网络波动之间取得可控平衡。:contentReference[oaicite:2]{index=2}

SRT 丢包检测、重传与延迟窗口

SRT 不是把所有数据无限重传。接收端为媒体包保留一个延迟窗口,缺失包只有在窗口允许的时间内重传才有价值;来得太晚的数据即使完整,也可能无法按实时节奏播放。

可靠 UDP 的工作机制

发送端为包维护序号,接收端据此发现缺口和乱序。接收端通过确认信息反馈接收状态,并对缺失数据发出重传请求;发送端若仍保留对应数据,就再次发送。

接收端不会立即把刚到达的包交给解码器,而是结合时间戳和配置的接收延迟进行排序。这个缓冲时间需要覆盖网络传输、RTT 波动和一次或多次重传,否则丢失包还未补回就已超过播放截止时间。FFmpeg 文档也将接收延迟定义为覆盖传输、意外增加的 RTT 和重传所需时间的缓冲。:contentReference[oaicite:3]{index=3}

这种机制与 TCP 的按字节可靠流不同:SRT 的目标是让媒体按时间播放,因此会在“继续等待旧包”和“保持实时进度”之间做取舍。

用 FFmpeg 建立本机 SRT 链路

示例要求 FFmpeg 构建已启用 SRT 协议。先在终端 A 启动 listener,再在终端 B 运行 caller。示例使用合成测试画面和正弦音频,不依赖外部媒体文件。

bash
# 终端 A:监听 UDP 9000,并播放收到的 MPEG-TS
ffplay -loglevel info -fflags nobuffer -flags low_delay \
  "srt://0.0.0.0:9000?mode=listener&latency=120000"

# 终端 B:生成测试流并连接监听端
ffmpeg -re \
  -f lavfi -i "testsrc2=size=1280x720:rate=30" \
  -f lavfi -i "sine=frequency=1000:sample_rate=48000" \
  -c:v libx264 -preset veryfast -tune zerolatency -g 60 \
  -c:a aac -f mpegts \
  "srt://127.0.0.1:9000?mode=caller&latency=120000"

预期输出

text
Output #0, mpegts, to 'srt://127.0.0.1:9000?...':
  Stream #0:0: Video: h264, 1280x720, 30 fps
  Stream #0:1: Audio: aac, 48000 Hz
frame=<COUNT> fps=<FPS> ...

终端 A 应打开彩条测试画面并播放持续音调。若提示 Protocol not found,说明当前 FFmpeg 未编译 SRT 支持;若跨主机测试连接超时,应确认接收端 UDP 端口已放行,并把 127.0.0.1 替换为接收端实际地址。

延迟参数如何设置

在 FFmpeg 的 SRT URL 中,latency、rcvlatency 和 peerlatency 的单位是微秒,因此示例中的 120000 等于 120 毫秒。有效接收延迟还会受到对端请求值影响,不能把 120000 误写成 120 后仍期待 120 毫秒。:contentReference[oaicite:4]{index=4}

延迟值过小,重传包经常来不及进入播放队列,表现为马赛克、音频断裂或统计中的丢包增加;延迟值过大,播放更稳定,但端到端等待也会增加。实际配置应先测 RTT、抖动和丢包,再从能稳定播放的较小值开始调整。

caller 主动发起连接,listener 在指定端口等待连接。两端的传输模式和加密配置必须兼容;生产环境还应结合带宽、码率、接收缓冲和防火墙规则共同验证,不能只看连接是否成功。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

SRT 与低延迟传输

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通