LLMs 的内部状态保持了幻觉检测的能力

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

该研究提出了一种审计方法,用于检测大型语言模型中的异常模式,并能传播到下游任务。研究结果表明,BERT在编码幻觉方面能力有限,而OPT则能够编码幻觉信息。该方法在没有暴露于虚假陈述的情况下,表现出与完全监督的离群样本分类器相当的性能。

🏷️

标签

➡️

继续阅读