通过无标签课程化有意义学习诊断和纠正大型语言模型中的知识缺失

BriefGPT - AI 论文速递 · 2024-08-21T00:00:00Z

大型语言模型（LLM）在自然语言处理领域引起了研究兴趣。为了解决LLM保留错误或有害知识的问题，需要进行知识遗忘。该综述介绍了知识遗忘问题的定义、相关工作和三种方法：参数优化、参数合并和上下文学习。同时提及了使用的评估数据集和未来的挑战和方向。