字节大模型同传智能体，一出手就是媲美人类的同声传译水平
💡
原文中文，约2600字，阅读约需7分钟。
📝
内容提要
字节跳动的研究人员推出了端到端同声传译智能体CLASI，效果接近专业人工水平。CLASI采用了端到端架构，具备获取外部知识的能力。在人工评测中，CLASI超过商业系统和开源SOTA系统，甚至达到或超过人类同传水平。研究人员还引入了多模态检索增强生成过程，提高了翻译质量。
🎯
关键要点
- 字节跳动推出了端到端同声传译智能体CLASI，效果接近专业人工水平。
- CLASI采用端到端架构，避免了传统级联模型中的错误传播问题。
- CLASI具备从外部获取知识的能力，提升了翻译质量。
- 在人工评测中，CLASI超过了商业系统和开源SOTA系统，达到或超过人类同传水平。
- CLASI的系统架构基于大语言模型，能够灵活调整处理策略，确保翻译的准确性和连贯性。
- 研究人员引入了多模态检索增强生成过程，提高了翻译质量。
- CLASI在中英、英中翻译中表现优异，人工评测有效信息占比超过78%。
- 研究人员与专业同传译员合作，制定了新的人工评估策略“有效信息占比”(VIP)。
➡️
