ICLR 2025 Spotlight | 参数高效微调新范式!上海交大联合上海AI Lab推出参数冗余微调算法 本文介绍了复旦大学和上海交通大学的研究团队提出的参数冗余微调范式及NoRM算法,旨在提升低秩适配器(LoRA)的微调性能。研究表明,随机删除LoRA参数可提高模型性能,并通过SVD分解和Sim-Search方法优化冗余参数。实验结果显示,NoRM在多个任务上优于传统LoRA方法。 LoRA NoRM SVD ai 参数冗余 微调 算法