使用一致性策略提升连续控制
原文中文,约300字,阅读约需1分钟。发表于: 。通过一步将噪声转化为动作,我们提出了一种名为 CPQL 的新型时间效率方法,解决了扩散模型在更新时的时间效率和准确性指导方面的问题,从而实现了脱机强化学习的策略改进,并可以无缝地扩展到在线强化学习任务中,最终实验结果表明,CPQL 在 11 个脱机任务和 21 个在线任务中取得了新的最高性能,推理速度相比 Diffusion-QL 提高了近 45 倍。
该文介绍了一种名为CPQL的新型时间效率方法,通过将噪声转化为动作,解决了扩散模型在更新时的时间效率和准确性问题,实现了脱机强化学习的策略改进,并可以无缝地扩展到在线强化学习任务中。实验结果表明,CPQL在11个脱机任务和21个在线任务中取得了新的最高性能,推理速度相比Diffusion-QL提高了近45倍。