量子位
·
Meta最新触觉机械手登Science子刊封面，操作未知物体精度最高提升94%
💡
原文中文，约2800字，阅读约需7分钟。
📝
内容提要
Meta的NeuralFeels技术使机械手能够自学操作未知物体，精度提升94%。该技术结合触觉与视觉，克服了传统训练对视觉的依赖，显著提高了物体重建和姿态跟踪的准确性，尤其在复杂环境中表现突出。
🎯
关键要点
- Meta的NeuralFeels技术使机械手能够自学操作未知物体，精度提升94%。
- NeuralFeels技术结合触觉与视觉，克服了传统训练对视觉的依赖。
- 该技术在复杂环境中表现突出，显著提高了物体重建和姿态跟踪的准确性。
- NeuralFeels技术通过多模态融合实现3D建模，优化物体姿态和形状估计。
- 前端采用深度学习策略，触觉Transformer用于预测接触深度。
- 后端通过非线性最小二乘问题优化姿态，构建神经SLAM以跟踪物体。
- 实验结果显示，物体重建精度在模拟环境中提高15.3%，真实世界中提高14.6%。
- 物体姿态跟踪精度在模拟环境中提高21.3%，真实世界中提高26.6%。
- 在复杂场景中，NeuralFeels技术的跟踪性能提升21.2%，在严重遮挡情况下提升94.1%。
- 未来研究将进一步优化技术，提升机器人在家庭、仓库和制造业等复杂环境中的性能。
➡️
