基于帧和事件流的手语翻译:基准数据集和算法

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

本研究提出了一种新方法,利用事件流辅助RGB摄像头捕捉手势数据,克服了手语翻译算法在光照和运动模糊下的局限性。通过收集15776个样本的数据集VECSL,提出了新的手语翻译框架M$^2$-SLT,并取得了先进的结果。

🎯

关键要点

  • 本研究提出了一种新方法,利用事件流辅助RGB摄像头捕捉手势数据。
  • 该方法克服了手语翻译算法在光照和运动模糊下的局限性。
  • 研究收集了包含15776个样本的数据集VECSL。
  • 提出了新的手语翻译框架M$^2$-SLT。
  • M$^2$-SLT框架在数据集上取得了先进的结果。
  • 该研究为后续相关研究提供了支持。
➡️

继续阅读