该研究分析了大型语言模型中的信息编码，发现表示熵与模型大小呈幂律关系。提出基于熵的理论，探讨自回归结构及标记关系，建立信息增益与岭回归的联系，并评估Lasso回归的有效性，结果显示信息分布广泛。
完成下面两步后，将自动完成登录并继续当前操作。
