一种基于多任务网络的麦克风阵列语音增强系统及方法

作者：张军; 赖志鹏; 宁更新; 冯义志; 余华; 陈芳炯; 温淼文; 季飞

来源：2022-04-06, 中国, CN202210353984.6.

本发明公开了一种基于多任务网络的麦克风阵列语音增强系统及方法,该系统由语音预处理模块、多任务网络模块、多任务损失统计模块、网络权重计算模块和语音重构模块组成。其中,语音预处理模块获取阵列语音、参考回声语音和各个任务目标语音作为输入语音并进行预处理；多任务网络模块完成阵列语音各声道的去混响、回声消除、降噪任务,并将多声道语音融合输出为增强后的语音；多任务损失统计模块用于计算多任务网络模块中各任务的损失值,并统计网络的总损失；网络权重计算模块根据网络的总损失计算梯度,将梯度反向传播,计算得到更新后网络的权重；语音重构模块完成从频域特征到时域语音的映射,得到增强后的干净语音。

• 单位
  华南理工大学