该研究提出一种轻量方法,直接从语音中检测语码转换,无需多语言转录。方法利用预训练语音编码器的帧级语言信息,通过单语录音识别语言选择性隐藏维度,并聚合其帧级激活进行预测。在CS-FLEURS的14个语言对上,Whisper-small编码器平均F1为0.798,优于CNN的0.776和HuBERT的0.751。结果表明预训练语音编码器已编码识别语码转换所需信息,可用于构建更具代表性的多语言语料库。
完成下面两步后,将自动完成登录并继续当前操作。