Mamba采用选择性状态空间模型实现内容导向推理，推理速度比Transformer快5倍，支持百万长度序列，在语言、音频和基因组等模态达到最先进性能。Mamba-3B在预训练和下游评估中优于同规模Transformer，媲美两倍规模模型。