1. 引子:从 NVLink 到 1.6T 光互联

现象

NVIDIA NVL576 超节点单柜 72 B200 卡互联成网,需要 1260 根 1.6T 光缆。CloudMatrix 384 单柜 64 昇腾 950 互联成网,需要 950 根 1.6T 光缆。这张"网"的总数据传输速率是 4 PB/s——等于全球互联网瞬时流量的 5%。

这只是超节点内部网络。再加上超节点之间互联(IB HDR / 400G RoCE / 华为 HiBLADE)、数据中心骨干(OTN/WDM)、跨数据中心互联(DCI),2026 年 AI 数据中心需要 100 万+ 1.6T 光模块——这是光通信产业链的"AI 时代"戴维斯双击

为什么网络"卡脖子"

一个 AI 超节点的训练效率,50% 由算力决定,30% 由显存决定,20% 由网络决定。网络是训练效率的"制约因素"。当 NVL576 单柜 72 B200 跑在 800G 网络上,GPU 利用率只能 65-70%(网络瓶颈);升级 1.6T 网络后,GPU 利用率提升到 85-90%,相当于单卡算力提升 15%。

核心结论:1.6T 光模块量产元年(2026)+ InfiniBand vs RoCE vs HiBLADE 三大网络之争。网络这一环AI 算力"卡脖子"普遍被低估,实际权重 20-30%。

2. 1.6T 光模块:量产元年

1.6T 光模块是什么

1.6T 光模块2026 年量产的最快光通信器件,单模块 1.6 Tbps 速率,采用 PAM4(4 级脉冲幅度调制) + 200G SerDes,支持 200G / lane 串行信号。

三大供应商

指标中际旭创(中国)新易盛(中国)Coherent(美国)
1.6T 量产2026 Q12026 Q12026 Q2
OSFP 月产能80K60K50K
QSFP-DD 月产能40K30K25K
主供客户NVIDIA / AMD / GoogleAmazon / MicrosoftMeta / Apple / Cisco
1.6T 单价$1200$1180$1450

中国厂商(旭创 / 新易盛)在 1.6T 元年(2026)已经领先美国。旭创 / 新易盛 1.6T OSFP 月产 80K + 60K = 140K,Coherent 50K,中国是美国的 1.6 倍。这是过去 10 年 AI 算力产业链中国第一次领先美国的一环。

2km / 10km / 80km 三档

3. InfiniBand vs RoCE vs HiBLADE:三大阵营

InfiniBand:闭源高性能,NVIDIA 主导

InfiniBand 是 NVIDIA 控制的闭源网络协议,200G / 400G / 800G 三档,目前最新 HDR(200G)+ NDR(400G)+ XDR(800G)。

RoCE:开源替代,Microsoft + Meta 推动

RoCE(RDMA over Converged Ethernet)开源的以太网络 RDMA 方案,2020-2025 完成 RoCE v2 标准。

HiBLADE:华为自研,昇腾专属

HiBLADE 是华为自研的超节点互联协议,2024 年首发,2025-2026 升级到 1.6T。

三大阵营对比

指标InfiniBandRoCE v2HiBLADE
延迟0.5 μs1.5-3.0 μs0.6 μs
带宽800G (XDR)800G (主流)1.6T (首发)
网卡成本$1200$200$400(华为内部)
License/卡/年$1000$0$0
生态NVIDIA + MellanoxMicrosoft + Meta + Broadcom华为云 + 贵安
市场60%35%8%

4. 集群调度:K8s / Volcano / Slurm / Ray

传统调度:Slurm + LSF

在 LLM 训练之前,高性能计算(HPC)集群用 Slurm / LSF 调度,基于队列优先级。这在 LLM 训练时不适用:LLM 训练需要长时间(7-30 天)独占千卡集群,Slurm 调度粒度太粗。

云原生调度:K8s + Volcano + Ray

集群调度对比

调度代表用户粒度能力
Slurm传统 HPC / 大学实验室队列级简单
K8s + VolcanoMicrosoft / Amazon / 阿里 PAIPod 级丰富
RayAnyscale / OpenAI(部分) / MetaTask 级灵活
内部魔改字节 / 阿里 / DeepSeek极致定制最强
关键 insight:字节 / 阿里的内部魔改调度已经超过开源方案。DeepSeek 用 2048 张 H800 训练 V3 仅用 28 天、$5.5M 成本,得益于自研 HAI-LLM 框架 + 拓扑感知调度

5. 光通信产业链

五大环节

2026 年全球 1.6T 光模块市场 预计 150 亿美元(800G 100 亿),CAGR 40%+,光通信产业链进入"戴维斯双击"阶段。

6. 风险与展望

风险

展望

关键判断:网络这一环中美差距最小,1.6T 中国旭创 / 新易盛已经领先。RoCE + HiBLADE 是中国 AI 算力"不依赖 NVIDIA"的关键。

参考资料