基于深度神经网络的语音去混响方法研究

来源 :西安电子科技大学 | 被引量 : 2次 | 上传用户:xu9865
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
室内混响声会严重影响音频信号的清晰度和可懂度,进而影响语音识别,助听器和声源定位的性能。此时,切实有效的混响消除方法就变得极为必要。尽管混响消除技术取得了持续和稳定的进步,但是我们仍然没有在这场战争中取得成功。在过去的几十年中,有很多无监督的语音去混响方法被提出,它们有些是通过估计房间脉冲响应的逆滤波器来解卷积混响信号,但是由于房间脉冲响应是1)未知的;2)时变的;3)具有很长的长度;4)不是最小相位系统,因此对房间脉冲响应的跟踪和估计变得十分困难。近年来,由于深度神经网络强大的学习能力,其被成功应用于语音增强,语音分离和带宽扩展等领域,这给了语音去混响任务的研究人员很多启发。深度神经网络的深层非线性结构可以被设计成一个精细的去混响滤波器。同时基于大数据训练,深度神经网络可以充分学习混响语音和无混响语音之间的复杂的非线性关系。因而在本论文中,不同于以往的传统信号处理的方法,我们提出一种基于深度神经网络的语音去混响方法。首先,我们提出了基于深度神经网络的单通道语音去混响框架,对数功率谱被用作训练深度神经网络模型的特征。深度神经网络采用线性的输出层和目标特征全局均值方差归一化的方法。深度神经网络作为映射函数,可以从混响语音中预测出无混响语音。几十种房间脉冲响应被用来构建大规模训练数据,以此提高深度神经网络模型对未见的测试混响环境的适应性。此外小规模训练集用来评估深度神经网络去混响系统在不充足的训练语料下的性能表现。其次,目前已有的去混响算法对混响环境均没有感知能力。由于混响环境的严重程度可以通过混响时间来衡量,因此我们研究了两个和时间相关的参数:帧移和帧扩。研究表明在深度神经网络训练中采用混响时间感知的帧移和帧扩会大大提高系统对混响环境的鲁棒性。因此我们提出了基于混响时间感知的深度神经网络单通道语音去混响框架。再者,我们将单通道的深度神经网络语音去混响框架扩展到了多通道。我们首先提出了基于深度神经网络的多通道语音去混响框架,该系统的输入为多个麦克风阵元提取出的混响特征集的串联,目标为参考阵元的无反响特征,深度神经网络作为映射函数从而同时实现了波束形成和去混响。此外混响时间感知技术在单通道上对混响环境表现出很强的适应性,因此我们通过采用混响时间感知的空时域信息,提出了基于混响时间感知的深度神经网络多通道语音去混响框架。最后,学术研究者普遍认为前端的语音增强不会给后端的语音识别带来性能提升,因为后端的语音识别系统对前端语音增强后引入的干扰非常敏感。而我们相信在非理想的声学环境下,前端信号处理算法会给后端的语音识别带来益处。因此我们提出了基于深度学习的端到端远场语音去混响和语音识别系统,该系统同时能够取得较好的语音质量和语音识别率。在本论文的最后,我们给出了全文总结,并对该课题的未来进行了展望。
其他文献
3 栽植方式果树种类繁多,品种和砧木差异很大,定干高度和树形及密度也有所不同。见表5。
<正>有元一代的历史虽然短暂,却波澜壮阔。元代的城市与宫苑建筑,上承唐宋,下启明清, 既有建筑历史的承启意义,又蕴籍了漠北与西域中古时代城市与建筑的艺术特征,在中国古代
会议
【正】新课程标准指出:朗读是理解课文的重要手段,是培养和提高阅读能力的重要方法。它在语文教学中有着特殊的意义,朗读由助于发展智力,并获得思想熏陶,还能培养记忆及表达
在小学语文教学工作中,广大教师要善于从教学实践中总结经验、寻找方法,还要充分参考他人的教研成果,运用到自身教学工作之中,实现教学成效的突破。笔者在语文教学中追求理念
<正> 中国古典园林的特征之一是以建筑为主。园林建筑无论总体布局、单体形式都极富变化,与宫殿、坛庙、寺观、住宅迥然不同。园林中各种不同种类、不同形式的建筑与山石、池
小学语文教学,总是"三步走",即首先认识课文字词;其次熟读课文,理解段落大意;最后概括文章中心思想。这严重制约了学生的学习积极性和创造性。下面,笔者结合自己的小学语文教学
1)缺钙症状。果实缺钙初期,顶部出现淡褐色小点,以后逐渐扩大成圆形或不规则形,病部凹陷且颜色加重,变为红褐色,表皮呈革质,纵切病果可见表皮下果肉变为淡褐色,四周果肉呈水渍状。病
继《国家赔偿法》、《行政处罚法》、《行政复议法》之后,又一部规范政府行为的重要法律——《行政许可法》已于7月1日起正式实施。这是我国行政法制建设的重要里程碑,是改革行
目的:探讨大学校内水痘流行规律、临床特点与防治措施,为预防控制大学校内水痘流行提供科学依据.方法:整理汇总2004~2008年某大学水痘住院病例,按描述性流行病学方法进行调查与
老年容易得的病在类型上常与年青人通常得的病不同,即使疾病类型与青年人相同,其病理、临床特点、对治疗的反应和预后也与年青人的不同,其特点是:1、多器官损害老年人通常同