基础模型在随机性和创造力上优于对齐模型

本研究解决了对齐模型在特定任务中的不足，特别是那些需要不可预测输出的任务，如随机数生成、混合策略游戏和创意写作。作者提出基础语言模型在这些领域的表现优于对齐模型，指出对齐技术可能导致模型行为的狭隘，影响创造性和多样性。这些发现表明，在某些能力之间存在有效的权衡。