Is the Logical Analysis of Transformers Performed in Self-Attention or in the Fully Connected Part?
原文英文，约100词，阅读约需1分钟。
📝
内容提要
本研究分析了变压器架构中自注意力与全连接层的逻辑关系，发现自注意力机制能够执行逻辑操作，值得进一步研究，可能影响未来模型设计。
🏷️
