多家中国科技公司最近推出了几款将为“全球调度以太网”或 GSE 提供支持的芯片,GSE 是一种网络协议,旨在适应人工智能和其他高性能工作负载所需的大量数据和高传输速度。根据登记册国有的中国移动是中国最大的移动运营商,自 2023 年发布白皮书以来一直致力于该技术的研究(PDF)关于“全调度以太网的技术架构”。
该技术与超以太网联盟 (UEC) 正在研究的技术类似。该小组正在共同开发技术,使 HPC 和 AI 集群能够在使用现有硬件的同时有效且高效地进行通信。
当前的以太网技术并不是为人工智能训练和其他 HPC 应用程序的大量工作负载而构建的;数据中心中通常存在的大型且繁忙的网络使数据难以通过,从而导致不可接受的延迟水平。这就是为什么使用 Nvidia GPU 的数据中心通常使用 NVLink 等技术来允许其系统直接通信。然而,NVLink 是一个专有系统,仅适用于 Nvidia 产品,限制了其实用性并使其部署成本高昂。
截至 2024 年 10 月,UEC 拥有 97 个成员,AMD 公布了第一个超以太网就绪网卡上个月。与此同时,国内外云服务提供商、芯片制造商、教育机构等50多家组织参与了GSE的开发。
据说本月推出的芯片将使 GSE 成为现实。相比之下,其他人报道称,中国移动已将该系统部署在其一个数据中心,并为人工智能训练带来了巨大的性能改进。
GSE 似乎是 UEC 正在开展的工作的直接竞争对手。然而,尽管据报道两个团队都发布了这两种技术的硬件,但我们仍然没有看到他们的能力的比较。看看这些技术中哪一种效果更好并且更具成本效益,这将是一件很有趣的事情。