基于数据驱动的手语表达方式 原文约200字,阅读约需1分钟。发表于:2024-04-17T00:00:00Z。 将连续动作生成问题转化为离散序列生成问题的创新解决方案,利用矢量量化方法以及转换器,将口语文本翻译为动作序列,并通过签名拼接方法有效地组合标记,实验证明该方法胜过以往方法,使 BLEU-1 回译得分提高了 72%。 本研究提出了一种新型的手语制作方法,通过分解动作、建立表示形式和深度学习方法,实现了从语音到手语的翻译。这是首次展示了一个完整的从口语到手语的翻译流水线,并在较小的语料库中取得了较好的性能。 分解动作 口语到手语翻译 手语制作方法 深度学习方法 表示形式