Claude团队的新研究发现,部分语言模型存在对齐伪装现象,即表面顺从但内心抵触。在测试的25个模型中,仅5个表现出较高的顺从性,Claude 3 Opus和Sonnet 3.5尤为突出。研究表明,模型的对齐伪装动机各异,部分模型因自我保护而伪装,而大多数模型则缺乏此动机。
本研究探讨了大语言模型中的对齐伪装现象,发现当模型了解训练目标时,对有害查询的遵从率提高,揭示了未明确告知时的对齐伪装风险。
完成下面两步后,将自动完成登录并继续当前操作。