音频开发 / 系统课时

安排 AEC NS AGC 处理顺序

安排 AEC NS AGC 处理顺序

AEC、NS、AGC 都在改善语音,但它们解决的问题不同,而且前一级会改变后一级看到的信号。本篇给出一条可直接用于实时通话采集链路的默认顺序,并解释参考信号、非线性处理和增益变化为什么会影响最终效果。

学习目标

  • 说清 AEC、NS、AGC 分别解决什么问题,以及它们依赖哪些输入
  • 按依赖关系安排常见的采集处理顺序,并正确接入远端参考信号
  • 识别会破坏回声抵消的非线性处理和动态增益位置

先按输入依赖排顺序

对典型全双工语音通话,采集侧常用的默认顺序是 AEC → NS → AGC。AEC 要先看到尽可能接近原始麦克风的信号,并同时拿到与扬声器播放内容对应的远端参考;NS 再压低残余背景噪声;AGC 最后调整整体响度,使送入编码器的语音电平更稳定。

模块 主要处理对象 关键输入依赖 放错位置的典型后果
AEC 扬声器声音经房间和设备耦合形成的回声 麦克风信号 + 远端播放参考 前级增益或非线性变化让回声路径更难建模
NS 风扇、空调、底噪等相对稳定噪声 AEC 后的近端语音 过早处理可能改变回声频谱,影响 AEC 估计
AGC 说话距离和声压变化导致的电平波动 已完成回声与噪声抑制的语音 过早放大噪声和回声,也会持续改变 AEC 输入幅度

这里的顺序是工程上的默认起点,不是所有库都暴露为三个可自由交换的独立模块。集成式语音前处理器可能把残余回声抑制、降噪和增益控制联合实现,此时应遵循该实现规定的数据流。

把参考信号接到正确位置

AEC 不是只处理麦克风的一路滤波器。它需要一份“远端将要播放什么”的参考信号,用这份参考去估计扬声器、机身和房间共同形成的回声路径,再从麦克风信号中减去可预测的回声成分。

AEC、NS、AGC 的采集处理链路与参考信号

参考信号应尽量代表真正送到扬声器的内容。如果播放链路在分出参考之后又做大幅音量、EQ、限幅或其他处理,AEC 看到的参考与真实回声源会偏离;条件允许时,应在这些会显著改变播放信号的处理之后取参考,或使用设备、SDK 明确指定的 render reference 接口。

避免在 AEC 前做强非线性处理

AEC 的核心假设之一,是参考信号经过某个可估计的声学路径后形成麦克风中的回声。削波、硬限幅、失真增强、强动态压缩等非线性操作会让这种关系更难用自适应滤波器描述,因此通常不应放在 AEC 之前。

AGC 也会持续改变输入幅度。若先 AGC 再 AEC,远端回声在麦克风一路上的增益会被不断重塑,AEC 的自适应过程更容易抖动;若先 NS 再 AEC,降噪器可能把一部分回声当成噪声改写频谱,同样会降低回声路径估计的一致性。

用症状反查顺序问题

若双讲时近端人声被明显压扁,先检查 AEC 是否拿到了正确参考以及播放延迟是否稳定;若静音段噪声被 AGC 明显抬高,检查 NS 是否位于 AGC 之前;若回声在音量变化后突然恶化,检查 AEC 前是否存在 AGC、限幅或其他动态处理。

工程上最稳妥的起点是让 AEC 最先解决“远端声音又被麦克风收回来”的问题,再由 NS 处理残余噪声,最后用 AGC 稳定送编码器的电平。真正落地时,优先遵循所用音频 SDK 对参考支路和模块耦合关系的要求,而不是机械交换三个模块的位置。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

安排 AEC NS AGC 处理顺序

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通