自研多模态追踪算法 PICO 为「手柄小型化」找到新思路

💡 原文中文,约4500字,阅读约需11分钟。
📝

内容提要

PICO团队开发了名为Centaur的多模态追踪算法,可在手柄部分或完全遮挡的情况下提供准确和稳定的追踪。该系统已通过极限测试,适用于运动健身、音游等场景。PICO数据实验室构建了多模态的同步相机系统,为XR交互方案设计提供了新的可能性。

🎯

关键要点

  • PICO团队开发了Centaur多模态追踪算法,能够在手柄部分或完全遮挡的情况下提供准确和稳定的追踪。
  • Centaur算法结合了惯性测量单元(IMU)、光学传感器和手部图像信息,解决了手柄遮挡问题。
  • 裸手追踪算法采用Down-Top结构,能够在手柄遮挡时提供精准的位姿预测。
  • Centaur多模态融合算法通过视觉信息和惯性信息的融合,优化手柄位姿及速度的估计。
  • PICO数据实验室构建了多模态同步相机系统,为技术研发提供了高精度数据支持。
  • 手柄小型化设计是XR交互方案中的创新进展,Centaur算法为人机交互设计提供了新的思路。
➡️

继续阅读