内容提要
Meta在2026年OCP峰会上介绍了支撑其AI模型和千兆瓦级Prometheus集群的网络创新,包括首款液冷网络机架IcePack与102.4T交换机IceCube、用于横向扩展的多平面扁平网络FPF、连接多区域的超级骨干BAG及SRv6骨干网、面向MTIA的以太网纵向扩展交换机Tahan及ESUN规范,并联合微软、阿里推动交换机平台标准OSPA,同时开源RDMA传输协议MetaRoCE。
延伸解读
液冷与高密度交换:IcePack/IceCube 的工程取舍
Meta 首款液冷网络机架 IcePack 搭配 102.4T 的 IceCube 交换机,采用 2OU 混合液/气冷、无 PHY 设计,可选 Broadcom Tomahawk 6C 或 NVIDIA Spectrum-6 ASIC,提供 128×800G 非阻塞容量。这反映出 AI 集群对单机架带宽密度的要求已推动网络设备从风冷转向液冷,同时“无 PHY”设计意在降低功耗与延迟,但也意味着对光模块和链路预算的依赖更强。
纵向扩展的以太网路线:Tahan 与 ESUN 的信号
Meta 为 MTIA 300 推出基于 Broadcom Tomahawk5 的以太网纵向扩展交换机 Tahan,并预览了 102.4T 硅上每机架 72 个加速器的方案。ESUN 规范从 1.0 推进到 1.1,表明以太网正被引入原本由专有互联主导的 scale-up 领域。对读者而言,这意味着加速器机架内的互联选择可能更开放,但以太网能否在带宽和延迟上满足 scale-up 需求,仍需看后续验证方法论的落地。
跨域扩展与骨干网:BAG 和 SRv6 的角色
在千兆瓦级 Prometheus 集群中,Meta 用 BAG 作为连接建筑、园区和区域的拍比特级超级骨干,并在 FBOSS + SAI 上运行 SRv6 区域骨干网。文章提到 SRv6 在 WAN 距离使用浅缓冲区,且从概念到部署仅数月。这说明跨域扩展不再只是带宽堆叠,而是涉及路由协议、缓冲策略和快速迭代能力;BAG 的部署经验也提示平台适配、距离管理和容量规划是实际挑战。
开放标准与开源传输:OSPA 和 MetaRoCE 的意义
OSPA 由 Meta、微软、阿里联合推动,旨在标准化交换机平台层,v1.0 规范已提交 OCP;MetaRoCE 则开源了 RDMA 传输实现,先提供用户态版本 libsoftmetaroce,后续还有 DPDK 版本。两者分别针对硬件平台碎片化和 AI 网络传输效率问题。对行业来说,这降低了多厂商平台重复 bring-up 的成本,但标准与开源实现的实际采用程度,仍取决于生态伙伴的跟进和互操作验证。
Q&A
Meta在2026年OCP峰会上展示的液冷网络机架和交换机具体是什么?
Meta展示了首款液冷网络机架IcePack,以及102.4T交换机IceCube。IceCube基于2OU、混合液/气冷、无PHY设计,采用Broadcom Tomahawk 6C或NVIDIA Spectrum-6 ASIC,提供128×800GE无阻塞容量,运行FBOSS。
Meta为AI横向扩展设计的FPF网络架构有什么特点?
FPF(Flattened Planar Fabric)是Meta的多平面横向扩展网络,每个GPU连接八个网络平面,将传统3层Clos改为2层Clos,支持NIC级数据包喷洒,并采用主机+交换机联合控制平面。该架构与NVIDIA合作构建,并分享给云合作伙伴。
Meta如何实现跨区域AI集群的scale-across网络连接?
Meta通过BAG(Backend Aggregation)构建拍比特级超级骨干,连接建筑、园区和区域,支撑千兆瓦级Prometheus集群;同时采用基于FBOSS+SAI的SRv6区域骨干网,实现跨域扩展。
Tahan是什么?它在MTIA系统中扮演什么角色?
Tahan是Meta为机架级MTIA 300 AI系统推出的基于以太网的纵向扩展交换机,基于Broadcom Tomahawk5,具备特定带宽和延迟特性及scale-up功能集,展示了以太网在纵向扩展中的优势,并推动向ESUN演进。
OSPA是什么?它解决了什么问题?
OSPA(Open Switch Platform Architecture)是由Meta、微软和阿里联合主导的新OCP倡议,旨在标准化交换机平台层。虽然SAI已使数据平面软件可移植,但平台层仍专有且碎片化,导致每个平台需数月重复启动工作;OSPA提出统一的多厂商参考设计,1.0规范已提交OCP。
MetaRoCE是什么?Meta对其有何开源计划?
MetaRoCE是Meta为AI网络设计的RDMA传输协议,针对all-reduce和all-to-all性能受最慢节点制约的问题。Meta正将其软件实现开源,首先在GitHub上提供用户空间版本(libsoftmetaroce),基于DPDK的版本即将推出。