本研究提出了CleanMel,一个用于去噪和去混响的单通道梅尔谱网络,旨在提升语音质量和自动语音识别(ASR)性能。实验结果表明,该网络在处理噪声和混响录音时显著改善了语音质量和ASR效果。
本研究提出了一种变分贝叶斯推断框架(VINP),旨在解决混响语音信号的去混响和盲室冲激响应(RIR)识别问题。通过结合深度神经网络预测先验分布,显著提升了自动语音识别(ASR)和盲RIR识别的性能。
本研究提出了一种实时自动语音识别的新方法,结合去混响与降噪技术,利用WPD波束形成优化神经波束形成,显著提升了在不同条件下的语音识别性能。
本文提出了一种结合物理和机器学习的新框架,用于分析声学信号。该框架利用贝叶斯推断、神经物理模型和非线性最小二乘法,有效推断室内冲激响应,并介绍了多种去混响和声源分离的方法,展示了在不同声学条件下的优越性能。
本文探讨了结合盲音频录音与3D场景信息进行新视角声学合成的优势。通过2-4个麦克风的录音和场景的3D几何及材料信息,估计场景中的声音。主要挑战包括声源定位、分离和去混响。研究表明,利用3D重建的房间脉冲响应(RIR)显著提高合成质量。模型在Matterport3D-NVAS数据集上表现优异,声源定位准确率接近完美,声源分离和去混响的PSNR和SDR指标优于现有方法。
本文提出了一种结合视觉线索和自监督学习的音频-视觉多通道语音分离与去混响方法。该研究结合扩散模型和音频-视频预训练框架,显著降低了训练时间和计算量,并在多个任务中超越了现有方法的表现。
本研究探讨了结合盲音频录音和3D场景信息对新视角声学合成的益处。通过音频录音和包含多个未知声源的场景的3D几何学和材料,估计场景中的任何声音。通过融入从3D重建房间导出的房间脉冲响应(RIRs),我们的方法在源定位、分离和去混响方面优于现有方法。在模拟研究中,我们的模型在源定位方面实现了接近完美的准确性,从而在新视角声学合成方面获得了高质量的结果。
该研究探讨了结合盲音频录音和3D场景信息对新视角声学合成的益处。通过音频录音和包含多个未知声源的场景的3D几何学和材料,估计场景中的任何声音。研究证明了融入从3D重建房间导出的房间脉冲响应(RIRs)可以统一解决声源定位、分离和去混响等任务。在模拟研究中,该方法在源定位、分离和去混响方面取得了较好的结果。
研究人员发布了EARS数据集,包含107位说话者的100小时干净无混响的语音数据,涵盖多种讲话风格,并评估了语音增强和去混响方法。还引入了盲测试集用于自动评估。
完成下面两步后,将自动完成登录并继续当前操作。