从视频示例中检索 ASL 手语的新能力

💡 原文中文,约200字,阅读约需1分钟。
📝

内容提要

该论文提出了一种自然语言辅助手语识别框架,通过利用语义信息降低手语识别中的视觉相似性问题。该方法使用了语言辅助标签平滑和交互式混合等技术,并引入了视频关键点网络作为骨干网络。实验结果表明,该方法在基准测试数据集上达到了最先进的性能。

🎯

关键要点

  • 提出了一种自然语言辅助手语识别框架 (NLA-SLR)。
  • 利用手语词汇中的语义信息降低视觉相似性问题。
  • 设计了语言辅助标签平滑和交互式混合等技术以提高识别性能。
  • 引入视频关键点网络作为新型骨干网络。
  • 实验结果显示该方法在三个基准测试数据集上达到了最先进的性能。
➡️

继续阅读