Capturing Fine-Grained Preferences: Preference Alignment Distillation for Small Language Models

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

本研究提出偏好对齐蒸馏(PAD)框架,旨在解决小型语言模型(SLMs)从大型语言模型(LLMs)中提取偏好知识的细化问题,显著提升人类偏好的对齐效果。

🏷️

标签

➡️

继续阅读