语言模型代理之间的激活信息传递

本研究解决了语言模型代理之间的通信效率低下问题，尤其是在自然语言交流中所需的高推理成本。我们提出了一种通过激活传递信息的创新方法，能够在保持相同参数和数据的情况下，显著提升模型在新任务上的表现和计算效率。实验结果表明，使用激活进行通信比传统自然语言通信提高了多达27.0%的性能，同时将计算资源需求降低至1/4以下。