AdaptMI:针对小型语言模型的自适应技能基础上下文数学教学
📝
内容提要
本研究解决了小型语言模型在上下文学习中的技能基础提示能力较弱的问题,提出了一种名为AdaptMI的自适应方法。该方法借鉴了人类教育学中的认知负荷理论,仅在模型表现不佳时引入技能基础示例,显著提高了小型语言模型在数学任务上的准确性,适用于多种基准测试,提升幅度可达6%。
🏷️
标签
➡️