手语翻译中的指字母拼写

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

该研究使用视频处理美国手语拼写翻译任务,通过新的架构和损失项实现了准确预测指拼单词长度的翻译模型,并通过两阶段推理方法提高了相对性能10%以上。该研究突出了手语翻译中拼写识别的潜力。

🎯

关键要点

  • 该研究使用视频处理美国手语拼写翻译任务。
  • 利用更精确的手部姿势估计和基于Transformer的编码-解码模型。
  • 提出了一种新的损失项,准确预测指拼单词的长度。
  • 引入新的两阶段推理方法,提升解码器的语言模型能力。
  • 在ChicagoFSWild和ChicagoFSWild+上相对性能提高了10%以上。
  • 研究结果强调了手语翻译中拼写识别的潜力。
➡️

继续阅读