BriefGPT - AI 论文速递
·
错误跨度标注：人工评估机器翻译的平衡方法
💡
原文中文，约400字，阅读约需1分钟。
📝
内容提要
本文介绍了错误跨度标注（ESA）作为一种人工评估协议，将直接评估与多维度质量度量相结合。通过与机器翻译系统和人工参考翻译的比较，验证了ESA的有效性。结果显示ESA比MQM更快且更便宜，无需昂贵的MQM专家。
🎯
关键要点
- 错误跨度标注（ESA）是一种新的人工评估协议。
- ESA结合了直接评估（DA）的连续评分和多维度质量度量（MQM）的错误严重程度标记。
- 传统的MQM方法需要大量时间和专家参与，效率低下。
- 直接评估（DA）虽然简单快捷，但可靠性较低。
- 通过与12个机器翻译系统和人工参考翻译的比较，验证了ESA的有效性。
- 结果表明，ESA在相同质量水平下比MQM更快且更便宜，无需昂贵的MQM专家。
➡️
