UCLA 音韵实验室档案的音标分割
内容提要
本文介绍了多个语音语料库及其在语音识别和合成中的应用,包括690种语言的TaL语料库、VoxPopuli多语种语音数据,以及用于低资源语言的自监督学习方法。这些研究展示了新方法和工具在语音学研究中的有效性,推动了语音技术的发展。
延伸解读
多语言语音资源的规模与用途
文中提到的 TaL 语料库覆盖 690 种语言,VoxPopuli 则包含 23 种语言的 10 万小时未标记语音和 1.8 千小时转录演讲。这些资源为语音识别、合成及语言学研究提供了大规模数据基础,尤其适合数据驱动的音韵学分析和低资源语言场景。
低资源语音识别的技术路径
文章介绍了一种结合多语言训练与自监督学习的方法,利用国际音标多语言模型为无标签语音生成帧级伪标签,引导 HuBERT 预训练。实验表明,该方法在目标语言上优于标准 HuBERT,并能节省最多 75% 的有监督训练数据,为低资源 ASR 提供了可行方案。
语音标注工具与数据创建方法
研究提出了一个自由开源的语音标注工具,支持音频对齐、语音识别等功能,可在苹果、Linux 等多平台使用,并已用于捷克语语音研究。同时,针对巴西葡萄牙语,新方法使样本中不同音素的百分比提高了 55.8%,提升了语音覆盖度。
Q&A
TaL语料库的主要特点是什么?
TaL语料库包含690种语言,适用于语音识别和合成等任务。
如何提高巴西葡萄牙语的音素分类准确率?
通过一种新方法创建语音语料库,音素分类准确率提高了55.8%。
VoxPopuli语料库包含哪些语言和数据?
VoxPopuli包含23种语言的100K小时未标记语音数据,以及16种语言的转录演讲和口译数据。
有哪些工具可以简化语音学研究中的标注工作?
开发了一个自由开源工具,支持音频对齐和语音识别等功能,适用于多平台。
自监督学习如何改善低资源语言的ASR性能?
结合多语言训练和自监督学习的方法可提高低资源ASR性能,节省75%的有监督训练数据。
Wav2Vec 2.0模型的识别率是多少?
使用Common Phone数据集训练Wav2Vec 2.0模型,取得了18.1%的识别率。