增强时态行动定位:带有循环机制的先进 S6 建模

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

该文章提出了一种新的时间行动定位(TAL)架构,通过特征聚合和循环机制,能够捕捉长距离依赖和时间因果关系。实验证明该方法在多个基准数据集上取得了优越结果,为未来的研究奠定了基础。

🎯

关键要点

  • 提出了一种新的时间行动定位(TAL)架构。
  • 该架构基于选择性状态空间模型,通过特征聚合 Bi-S6 块和双向 Bi-S6 结构。
  • 采用循环机制增强时间和通道依赖建模。
  • 能够捕捉长距离依赖和时间因果关系,且不增加参数复杂性。
  • 在多个基准数据集上取得了优越结果,包括 THUMOS-14(74.2%)、ActivityNet(42.9%)、FineAction(29.6%)和 HACS(45.8%)。
  • 消融分析表明,Stem 模块中的双向结构和循环机制优于传统方法。
  • 反映了基于 S6 的模型在 TAL 任务中的潜力,为未来研究奠定基础。
➡️

继续阅读