Meta 在 2026 年 OCP 全球峰会上公布了一连串网络侧动作,其中最容易被忽略、但对自建 AI 集群的团队影响最直接的一条是:其自研 RDMA 传输协议 MetaRoCE 开始开源。首个用户态实现 libsoftmetaroce 已上 GitHub,基于 DPDK 的版本“即将推出”。
Meta 给出的理由很直白:网络已经进入 AI 集群的关键路径,all-reduce 与 all-to-all 的性能被数十万加速器中最慢的那个节点卡住。这套传输规范由 Meta 的 Arvind Srinivasan、Sandeep Nagaraja 与 AMD 的 Balakrishnan Raman 在专场中讲解。
交换机平台层也要“开源化”
比 MetaRoCE 更值得关注的是 OSPA(Open Switch Platform Architecture)。Meta 的判断是:SAI 已经让数据面软件可移植,但交换机平台层仍是各家私有、碎片化的,每上一个平台就要重复数月的 bring-up 工作。OSPA 提出统一的多厂商参考设计,v1.0 规范已提交给 OCP。该倡议由 Meta、微软、阿里巴巴共同牵头,演讲者名单里还有以个人身份参与的 Guohan Lu。
液冷网络机架与 102.4T 交换机
硬件侧,Meta 首个液冷网络机架 IcePack 搭配 IceCube 交换机 blade:102.4T 容量、128×800G、2OU、混合液冷/风冷、无 PHY 设计,可选博通 Tomahawk 6C 或英伟达 Spectrum-6 ASIC,运行 FBOSS。N-IceCube 为对应型号。Meta 还披露了 51.2T 共封装光学(CPO)的验证经验,并将向 102.4T 延伸;同时在大规模部署 800Gb/s 有源电缆(AEC),并讨论线性可插拔光学(LPO)在超大规模下能否达到重定时方案的可靠性。
横向扩展:每个 GPU 接八个网络平面
Flattened Planar Fabric(FPF)是 Meta 的多平面横向扩展网络:每颗 GPU 连接八个网络平面,三层 Clos 压到两层,NIC 级包喷洒,主机与交换机控制面合并。该方案与英伟达共同构建,并向云合作伙伴共享。跨数据中心层面则是 BAG 超级骨干,把楼宇、园区和区域连成千万亿比特级网络,已用于其吉瓦级 Prometheus 集群;区域骨干采用 FBOSS + SAI 上的 SRv6。
纵向扩展押注以太网
面向机架内 scale-up,Meta 推出 Tahan——基于博通 Tomahawk5、服务于 MTIA 300 机架级系统的以太网 scale-up 交换机,并预览了 102.4T 硅上每机架 72 颗加速器的方案。ESUN(Ethernet for Scale-up Networking)规范从 1.0 推进到 1.1。Meta 还提到一个统计性难题:铜缆 scale-up 域中每机架数千条连接,即使 99.9% 良率也意味着约 10 条坏链路,而盲插卡笼没有逐链路可维护性。
所有演讲视频与幻灯片已在 2026 年 OCP 全球峰会官网公开。