OpenAI联合五大巨头制定协议标准,剑指百万GPU集群瓶颈
N.R. Finch
OpenAI周三宣布,与AMD、博通、英特尔、微软及英伟达联合发布名为"多路径可靠连接"(Multipath Reliable Connection,MRC)的开放网络协议,旨在解决百万GPU规模AI训练集群中的网络拥塞与故障问题。
该协议已在OpenAI全部前沿模型训练超级计算机上完成部署。
百万GPU时代的网络瓶颈催生新协议
MRC是一种基于RDMA(远程直接内存访问)架构的新型网络协议,采用数据包喷射技术,允许流量同时在多条网络路径上并发传输,从而充分利用集群带宽 。
在故障处理上,MRC支持微秒级链路切换。当单条网络链路发生故障时,流量可在极短时间内重路由至备用路径,有效减少GPU因等待网络恢复而造成的算力浪费 。
OpenAI表示,随着AI训练规模向数十万乃至百万GPU量级跃升,传统网络协议面临严峻的拥塞瓶颈,MRC正是针对这一问题的系统性解决方案 。
MRC目前已部署于OpenAI两大核心训练基础设施:位于美国德克萨斯州阿比林、依托甲骨文云构建的超算站点,以及微软的Fairwater超级计算机集群 。
开放协议之争:向InfiniBand封闭生态发起挑战
此次OpenAI选择以开放协议形式发布MRC,并联合行业内主要芯片及云计算厂商,被业界解读为一次明确的标准制定行动 。
MRC若获广泛采纳,将对Mellanox InfiniBand等传统封闭式高速互联方案构成直接竞争压力。英伟达同时出现在MRC联合发布方名单中,显示其在维护现有生态的同时,亦寻求在新兴开放标准中占据位置 。
分析人士指出,AI基础设施的竞争已从芯片算力延伸至集群网络层,掌握互联标准的主导权,将对未来超大规模数据中心的建设格局产生深远影响。
Content is for reference only, not financial advice.