本文提出了一种基于高斯图模型的参数高效微调(PEFT)方法,首次将高斯图模型应用于PEFT任务。该方法通过$ ext{l}_{2,g}$范数选择关键参数,捕获全局依赖关系。在微调RoBERTa-Base时,实验结果显示该方法表现优异,显著减少了所需的可训练参数。
完成下面两步后,将自动完成登录并继续当前操作。