ProSA：评估与理解大型语言模型的提示敏感性

BriefGPT - AI 论文速递 · 2024-10-16T00:00:00Z

研究探讨大型语言模型对提示敏感性的变化，提出ProSA框架进行评估。通过PromptSensiScore和解码信心机制，发现模型敏感性在不同数据集和模型间波动，大型模型更具鲁棒性。这为提示敏感性分析提供了工具，对提升用户满意度和评估准确性有重要影响。