无需术语和不必要解释的通用手语翻译和生成的亮度级别表示法
💡
原文中文,约400字,阅读约需1分钟。
📝
内容提要
本论文介绍了一种名为SignCL的对比学习策略,用于改善手语翻译系统的性能。实验证明,SignCL能够显著减少表示密度,并在不增加模型参数的情况下提高翻译框架的性能。与最先进的方法Sign2GPT相比,SignCL获得了更好的性能。
🎯
关键要点
- 论文介绍了一种名为SignCL的对比学习策略,用于改善手语翻译系统的性能。
- 表示密度问题是妨碍手语翻译系统性能的瓶颈。
- SignCL通过自我监督的方式改善特征表示的可区分性。
- 实验证明,SignCL显著减少了表示密度,并提高了翻译框架的性能。
- 在CSL-Daily数据集上,SignCL使手语变形器和GFSLT-VLP的BLEU得分分别提高了39%和46%。
- SignCL在不增加模型参数的情况下获得了更好的性能。
- 与最先进的方法Sign2GPT相比,SignCL只使用了其参数的35%。
➡️