2. 声网凤鸣AI引擎：AI音频降噪、AI回声消除和3D空间音频算法的实现与应用（吴渤）.pdf

1、声网 凤鸣AI引擎AI频降噪、AI回声消除和3D空间频算法的实现与应吴渤声 频算法专家 13087586307看不清的数字RTE2 0 2 3RTE 2 0 2 3RTE2023听不清的声音噪声-ANS(噪声抑制)回声-AEC(回声消除)忽大忽小-AGC(增益控制)凤鸣AI引擎1凤鸣 AI降噪AI降噪可以做什么使用AI降噪的用户（非研发人员）关注什么1户追求的并不是完全噪的环境，存在认为对掉线的可能，相噪声抑制对损伤更不能接受2户场景多种多样，对于唱歌、存在伴奏、声重叠、硬件3A损伤和频丢失的语均不能损伤3在不增加运算量的前提下，具有混响抑制功能，且在混响环境下去混响后的语是然损的4持48kH

2、z的质、低运算量（千元以内的机型）、低时延（10ms左右）噪声抑制语音损伤损失函数兼顾强降噪和高保真融合AIVAD避免抑制人声训练语料不可能覆盖线上的所有情况融合AIMD避免损伤伴奏噪声和混响抑制一体化的训练策略优化拟合目标保证人声自然050100150200250300350400450500?1?0.500.51Room Impulse Response(RIR)Time(ms)Amplitudedirectearlylate100msEarly50msEarly=+语音的自相关Target=EarlyReverb_Modification优化拟合目标保证人声自然K歌场景+48kHz高音质

3、!AI#$%&()*+,-./01#$%&()*+,-./01(ms)2(2(iPhone6OppoA5sGalaxy J6+Honor9 LiteGalaxy S6!#$%!#$%&(&(AI)*+,)*+,-./012-./012+34256342563434A8MT6765SDM425Kirin 659Exynos 74202022550.422.703.801.912.242023550.281.361.660.801.262凤鸣 AI回声消除凤鸣AIAEC实现方法外放K歌主播现场观众端效果不用佩戴耳机在线音乐教学Farin-师指导Nearin-学弹奏AIAEC Output3凤鸣 3D空间音频传统2D空间音频和凤鸣3D空间音频对比传统2D靠双声道的时延差和量差仅能分清左右凤鸣3D能模拟3维空间任意向的声持48kHz质人感知向的原理廓在接收不同向的声时，会让声波以不同的路径传内凤鸣3D空间音频实现方法凤鸣3D空间音频赋能在线会议带上机聆听扫码上B站观看感谢参与THANKS扫码填问卷