BriefGPT - AI 论文速递 · 2025-05-01T00:00:00Z FreqKV：用于高效上下文窗口扩展的频域键值压缩 💡 原文中文，约700字，阅读约需2分钟。 📝 内容提要 本研究提出了一种新方法，通过分析频域中的键值缓存能量分布，利用低频部分进行有效压缩，解决大型语言模型在长文本生成中的上下文窗口扩展问题。实验结果表明，该技术在长上下文任务中显著提高了效率和有效性。 🏷️ 标签 上下文窗口 效率提升 键值缓存 长文本生成 频域 频域分析 阅读原文 生成长图 分享链接 已复制链接
