国内首个端到端通用语音大模型——心辰Lingo开放内测预约
内容提要
心辰Lingo是国内首个端到端通用语音大模型,具备实时打断、实时指令控制、超级拟人、能说会唱等能力。它能捕捉语气、情绪、犹豫和停顿,提供情绪价值。Lingo拥有原生的语音理解、多种语音风格表达和语音模态超级压缩等技术特征。Lingo可应用于具身智能、心理疗愈、客户服务、儿童教育和岁月档案等领域。心辰Lingo的发布是西湖心辰在语音技术领域的重要里程碑。
延伸解读
端到端语音模型为何更“懂”情绪
传统语音交互需经过“语音转文字、理解文字、生成回复文字、文字转语音”多个步骤,每次转换都会丢失语气、情绪和言外之意。心辰Lingo作为端到端模型,直接处理语音,能捕捉语气起伏、情绪波动甚至犹豫和停顿,从而提供更自然的情绪价值。这种架构差异是它区别于传统语音助手的关键。
三大技术特征支撑多场景应用
心辰Lingo具备原生语音理解、多种语音风格表达和语音模态超级压缩三大特征。原生理解能同时识别文字与情感、音调、环境音;风格表达可自适应调整语速、音高,并生成对话、歌唱、相声等响应;超级压缩采用数百倍压缩率的编解码器,降低计算存储成本。这些技术使其能灵活适配具身智能、心理疗愈、客服、儿童教育等场景。
从客服到岁月档案:应用探索的边界
文章展示了心辰Lingo在多个领域的应用设想:具身智能中提供个性化语音服务,心理疗愈中模拟亲友或咨询师,客服中识别情绪并即时调整,儿童教育中鼓励表达并用说唱增加趣味,岁月档案中利用长期记忆和AI克隆技术“复活”亲友记忆。这些探索表明端到端语音技术正从单一交互向情感陪伴和记忆存储延伸。
发布节点与体验方式
心辰Lingo由西湖心辰研发,被定位为国内首个端到端通用语音大模型。文章提到,研发团队针对中文进行增强,其中文语音效果相较GPT-4o更为出色。该模型将于9月5日在外滩大会正式发布,目前开放测试预约,感兴趣的用户可预约体验。这标志着西湖心辰在语音技术领域的重要里程碑。
Q&A
心辰Lingo的主要功能是什么?
心辰Lingo具备实时打断、实时指令控制、超级拟人等能力,能够捕捉语气、情绪和犹豫,提供情绪价值。
心辰Lingo如何改善传统语音交互的不足?
心辰Lingo通过端到端模型,避免了传统语音交互中信息丢失的问题,能够更全面地理解语音内容。
心辰Lingo可以应用在哪些领域?
心辰Lingo可应用于具身智能、心理疗愈、客户服务、儿童教育和岁月档案等多个领域。
心辰Lingo在心理疗愈方面的作用是什么?
心辰Lingo可以模拟朋友和亲人的沟通方式,帮助用户缓解压力和焦虑,提供情感支持。
心辰Lingo如何提升儿童教育的效果?
心辰Lingo通过分析儿童语音内容,激发表达能力,并用说唱的方式增加学习趣味性。
心辰Lingo的发布有什么重要意义?
心辰Lingo的发布标志着西湖心辰在语音技术领域的重要里程碑,推动了智能语音应用的发展。