基于数据驱动的手语表达方式

原文约200字,阅读约需1分钟。发表于:

将连续动作生成问题转化为离散序列生成问题的创新解决方案,利用矢量量化方法以及转换器,将口语文本翻译为动作序列,并通过签名拼接方法有效地组合标记,实验证明该方法胜过以往方法,使 BLEU-1 回译得分提高了 72%。

本研究提出了一种新型的手语制作方法,通过分解动作、建立表示形式和深度学习方法,实现了从语音到手语的翻译。这是首次展示了一个完整的从口语到手语的翻译流水线,并在较小的语料库中取得了较好的性能。

相关推荐 去reddit讨论