BriefGPT - AI 论文速递 · 2024-11-12T00:00:00Z

使用稀疏特征级约束的直接偏好优化

📝

内容提要

本研究提出特征级约束偏好优化（FPO）方法，旨在提高大语言模型与人类偏好的对齐效率和训练稳定性。实验结果显示，FPO使赢率提升5.08%，并降低计算成本，为高效对齐提供了新方案。

🏷️

标签

偏好优化 大语言模型 特征级约束 计算效率 训练稳定性