清华大学与咪咕团队联合推出首个沉浸式体积视频数据集ImViD，突破传统视频限制，实现360°真实场景与6-DoF交互，支持动态捕捉与高保真音视频融合，推动元宇宙与数字孪生技术的发展。

本研究提出了一种新的3D物理模拟器3DGSim，旨在从RGB视频中学习物理模拟。该方法通过将图像编码为3D高斯粒子表示，利用变换器传播动态，有效捕捉多种物理行为，具备良好的可扩展性和泛化能力。

本研究提出了一种新型手部模型（MANO），结合标准化三维模型（SMPL）构建全身动态捕捉模型（SMPL+H），实现复杂动作捕捉。同时，研究介绍了手势识别和重建的新方法，利用自我监督学习和生物力学约束提高准确性，推动机器人技能和人机交互的发展。