Yann LeCun不看好强化学习：「我确实更喜欢 MPC」
原文中文，约2900字，阅读约需7分钟。
📝
内容提要
Meta 的首席 AI 科学家 Yann LeCun 更倾向于使用模型预测控制（MPC）而非强化学习（RL），因为前者效率更高且对试错的需求更低。他建议尽量减少使用 RL，专注于从主要观察中学习世界及其模型的良好表示。MPC 在控制性能和效率方面显示出显著的改进。然而，有人认为解决精确的 MPC 模型具有挑战性，并且实现良好的世界模型也很困难。人们认为 RL 和 MPC 并不互相排斥，可能各自有其适用的场景。
❓
Q&A
Yann LeCun为什么更倾向于模型预测控制（MPC）？
Yann LeCun认为MPC效率更高且对试错的需求更低，能够在没有特定任务学习的情况下解决新任务。
强化学习（RL）有哪些主要缺点？
强化学习需要大量试验，效率低下，且与人类学习方式相悖。
模型预测控制（MPC）在实际应用中有哪些优势？
MPC在控制性能和效率方面显示出显著改进，广泛应用于多个领域，如化学工程和机器人技术。
ML-MPC是什么，它如何克服传统MPC的局限性？
ML-MPC是将机器学习与MPC结合的方法，通过数据驱动模型来提高控制的准确性和适应性。
强化学习和MPC可以结合使用吗？
是的，强化学习和MPC并不互相排斥，已有研究将二者结合使用，效果良好。
在什么情况下应该选择强化学习而不是MPC？
强化学习适合解决复杂动力学或未知系统模型的问题，而MPC更适合建模良好且动态可预测的问题。
🏷️
