一、先划清边界:scale-up vs scale-out(必做的前提校正)
这两个词天天混用,但物理意义完全不同,先讲清楚才不会被带偏:
- scale-up(向上扩展 / 纵向):把一柜里几十上千颗 XPU 焊成"一颗逻辑上的超大 GPU"。它们之间走内存语义——直接读写对方的显存(load/store),像同一块主板上的多核协作。要求超高带宽(TB/s 级)、超低时延(纳秒级)、并且几乎不容许丢包,因为没有传输层去重传。代表:英伟达 NVLink / NVSwitch、AMD Infinity Fabric、UALink、谷歌 TPU 的 ICI。
- scale-out(向外扩展 / 横向):把许多"节点/机柜"用网络连成大集群,走包(packet)、用 RDMA/RoCE 语义,可以丢包重传。时延预算宽松得多。代表:以太网、InfiniBand。
一个生动的对照:scale-up 像"同一栋楼里同事面对面递文件"——快、直接、丢一份就乱套;scale-out 像"跨城寄快递"——慢一点没关系,丢了再寄一次。scale-up 域能有多大("world size"),直接决定了张量并行、MoE 专家并行的 all-to-all、KV-cache 内存池能铺多开,是大模型训练/推理性能的命门(参见 Meta 工程博客)。
二、为什么今天是"铜"的天下
最有代表性的实物是英伟达 GB200 NVL72:72 颗 Blackwell GPU 用 NVLink 连成一个域,每颗 GPU 1.8 TB/s、整柜 130 TB/s 全互联——而这套 scale-up 主干全是无源铜:5,184 根铜缆、合计约 2 英里(约 3.2 km),盲插在背板上(The Register, 2024-03-21)。黄仁勋反复为铜背书,原因是铜在机柜内有四个硬优势:
- 省电:无源铜几乎不耗电。SemiAnalysis 估算,若把 NVL72 这套铜主干换成光,光收发+重定时器要额外吃约 20 kW/机柜——这电省下来全给算力。
- 零延迟:无源铜不做电光转换、不过 DSP,几乎不加时延;而光天然多一道"电→光→电"的工序。
- 更可靠:铜更凉、更省电,于是更不容易"抖"(flap)和坏——这点对 scale-up 是决定性的(见第四节)。
- 更便宜:铜远比等量的光收发器便宜。
三、铜的尽头:什么逼着光走进 scale-up
铜的死穴是距离随速率坍缩:"数据率翻倍,传输距离大约缩 30–50%"(Marvell)。具体地:约 3 米@5G → 约 1 米@200G;到 224G SerDes,无源铜的可用距离不到 2 米。这在物理上把一个高带宽 scale-up 域卡死在约一个机柜(约 72 GPU)。主动电缆(AEC,在缆端加 DSP)能把距离拉长约 3 倍,但又把功耗、时延、故障率带了回来。
于是逼光上位的不是省电、而是"够不着"。当 scale-up 域要跨出单机柜——英伟达 Rubin Ultra NVL576(576 GPU 跨 8 个机柜连成一个 NVLink 域,2027 下半年)、再到 Feynman NVL1152(2028)——铜在跨柜距离上达不到所需带宽,只能上光。英伟达的原则被黄仁勋一句话说尽:"能用铜就用铜,必须用光才用光"。所以 NVL576 是"柜内铜 + 跨柜 CPO",到 NVL1152 才"基本全 CPO"(HPCwire, 2026-03-17)。
四、scale-up 光互连最残酷的"及格线"
为什么光在长距离、在 scale-out 交换机上早就用了,偏偏 scale-up 是最后一块?因为 scale-up 给光开出的及格线高得多:
- 可靠性(最关键):scale-up 走内存语义、没有重传安全网,一根链路抖一下,整个紧耦合域、整个训练任务都可能崩。规模放大后这事变得恐怖——研究(arXiv《The Ghost in the Datacenter》, 2026-03)给出的尺度:2023 年 2 万 GPU 约每 3 小时一次 flap;2024 年 20 万 GPU 约每 12 分钟;2025 年约 300 万 GPU、超千万条光链路,平均每约 48 秒某处就抖一次。可插拔光模块 FIT 高达约 3 万,Credo 称其 AEC/ZeroFlap 可靠性比激光光学好 100–1000 倍。结论:scale-up 对光的可靠性要求比现有可插拔高约 100 倍。
- 时延:纳秒级预算,要逼近铜的"近零附加时延"。
- 带宽密度(shoreline):每毫米芯片边缘要塞下 Tb/s 级。Blackwell 封装外密度约 0.4 Tbit/s/mm,目标要高数倍。
- 能效:scale-up 目标 <约 1 pJ/bit;对比可插拔约 20–22 pJ/bit、CPO 约 5–7 pJ/bit——要比无源铜还有竞争力,门槛极高。
- 成本:海量激光器/光纤阵列要便宜。
五、四条技术路线(附对比)
| 路线 | 怎么做 | 代表 | 定位 |
|---|---|---|---|
| 封装内光 I/O | 光引擎作为 UCIe chiplet 摆在 XPU 裸片旁,每颗加速器直接出光 | Ayar Labs TeraPHY(8 Tbps) | 通用、可搭任何家芯片;最终形态 |
| 光 interposer / 光 fabric | 在芯片下方/之间铺有源光层,把光送到裸片任意点 | Lightmatter Passage(114T)、Celestial Photonic Fabric(→Marvell) | 超高密度、可做内存解耦 |
| 光交换 OCS | 用 MEMS/固态镜面物理重构光路,几乎零功耗、协议无关 | 谷歌 Apollo/Palomar、Lightmatter 固态 OCS | 重构拓扑而非转发包;谷歌用它重构 TPU scale-up 域 |
| AEC / 线性桥接 | 主动铜缆/线性光,近期把 scale-up 距离撑住 | Credo ZeroFlap、Astera | 2026–27 过渡主力,仍是铜为底 |
要点:"封装内光 I/O"和"光 fabric"是终局,"AEC/线性"是当下的桥。英伟达自己也是这条路径——柜内铜撑到 NVL576(2027),scale-up CPO 留到 Feynman NVL1152(2028)。谷歌的 OCS 值得单独点破:它的 Palomar(176 片微镜 MEMS)重构的是 TPU 的 ICI(scale-up)拓扑——把 64 芯小立方拼成更大 3D 环面,因此 OCS 在 TPU 体系里更像"让 scale-up 域可重构",模糊了 up/out 边界(SemiAnalysis)。
六、协议标准之战
光是物理层,上面跑什么协议是另一场更激烈的战争。Bechtolsheim 在 OFC 2026 一句话概括格局:"英伟达在一边,其他所有人在另一边"。
| 阵营 | 主推方 | 状态(北京时间) |
|---|---|---|
| NVLink / NVLink Fusion | 英伟达(在位者) | NVLink Fusion 于 Computex 2025-05-18 开放给第三方定制芯片;NVLink 5→6→7→8 随 Blackwell→Rubin→Rubin Ultra→Feynman 演进 |
| UALink | AMD、博通、谷歌、英特尔、微软等(无英伟达) | 1.0 规范 2025-04-08 发布(200G/lane、至 1,024 加速器);2026-04-07 出 2.0+ 三项新规;但交换芯片要 2026 下半年才到 |
| Scale-Up Ethernet(SUE→SUE-T)/ ESUN | 博通牵头;OCP 工作组 | SUE 1.0 于 2025-07-16 投给 OCP;2025-10-13 OCP 成立 ESUN(含英伟达),SUE 改名 SUE-T 做上层传输 |
| OCI MSA(统一光物理层) | AMD、博通、英伟达、Meta、微软、OpenAI | 2026-03-12 成立;定义协议无关的光 PHY,让 NVLink 与 UALink 共用同一束光;GEN1 4λ×50G NRZ=200G/向,目标 3.2 Tbps/纤、链路功耗约 30W→9W |
看点:英伟达被 UALink 排除在外,却参与了 Ethernet 的 ESUN 和光层的 OCI MSA——在协议上守 NVLink 城池,在光物理层上和对手坐到一桌(因为光 PHY 协议无关,谁都得用)。UALink 的软肋是交换芯片迟到,连 AMD 首批系统也先上以太网 scale-up、UALink 留作后续。
七、关键玩家与真实案例
英伟达 — NVLink 的"铜到光"路线图
NVLink 5(Blackwell,1.8 TB/s/GPU)→ NVLink 6(Rubin,2026)→ NVLink 7(Rubin Ultra NVL576"Kyber",约 600 kW,2027 下半年)→ NVLink 8(Feynman NVL1152,约 2028)。scale-up CPO 的真正落点是 2028 的 NVL1152;NVL576 仅"跨柜"用 CPO、柜内仍铜。注意别和它已出货的 scale-out CPO(Quantum-X / Spectrum-X Photonics,宣称 5× 能效、10× 韧性)混为一谈——后者更早、更低风险。NVLink Fusion(2025-05)则把 NVLink 开放给联发科、Marvell、Astera、富士通、高通等做"半定制",把潜在叛逃者拉回自家光/电生态。
Marvell × Celestial AI — 把"光 fabric"买进门做 scale-up
Marvell 于 2025-12-02 宣布、2026-02-02 完成收购 Celestial AI(预付约 32.5 亿美元:10 亿现金 + 约 2,720 万股;含对赌报道称总额最高约 55 亿)。Celestial 的 Photonic Fabric / OMIB 能把光送到裸片任意点(而非只在封装边缘),宣称带宽约 25×、时延/功耗较交换机 CPO 低 10× 以上,并主打内存解耦(HBM3e+DDR5,单 2U 约 33 TB 统一内存)。Marvell 还另推 UALink 定制方案,并是亚马逊 Trainium 的主力定制硅伙伴;英伟达也向 Marvell 投了约 20 亿美元。
其他玩家速览
- AMD:Infinity Fabric + MI400 系列(MI455X)与 "Helios" 机柜(72 卡、31 TB HBM4、1.4 PB/s);MI400 是首批兼容 UALink 的加速器,但 Helios 先上博通以太网 scale-up(HPE 首发、Oracle 旗舰客户),UALink 待交换芯片 2026 下半年。
- 博通:Scale-Up Ethernet(SUE/SUE-Lite)+ Tomahawk Ultra(51.2T、250 ns 交换时延、SUE 下 XPU-to-XPU <400 ns,2025-07 出货);光侧 Bailly→Davisson CPO 路线,称 CPO 将是本十年 scale-up 网络的核心。
- Ayar Labs:TeraPHY UCIe 光 I/O chiplet(8 Tbps、SuperNova 16 波长激光);2026-03 完成 5 亿美元 E 轮、估值 37.5 亿,英伟达、AMD 参投。
- Lightmatter:Passage M1000 光子超级芯片(114 Tbps、256 光纤、固态 OCS);Series D 4 亿、估值 44 亿。
- Astera Labs:Scorpio 智能 fabric 交换(X 系列 320 lane、PCIe 6),当前以铜/PCIe 为主、路线图加"光直连加速器";是 NVLink Fusion 伙伴。
- Credo:scale-up 近期桥接的 AEC 主力(ZeroFlap 1.6T/224G、可靠性 100–1000×),曾把英伟达 Kyber NVL576 整柜用 AEC 拉满;约 73% AEC 份额。
- Nubis(被 Ciena 以 2.7 亿美元收购,2025-09)、Xscape(多波长激光,2026-03 增资)、Enfabrica(3.2T SuperNIC):补齐光引擎/激光/网卡的拼图。
八、中国生态:被迫先走全光
华为 CloudMatrix 384 — 用"全光 + 堆量"对冲制程
因拿不到最先进制程,华为反而在 scale-up 上比英伟达更"激进上光":CloudMatrix 384 把 384 颗昇腾 910C + 192 颗鲲鹏 CPU 用 全光 mesh(灵衢 UnifiedBus)连成一个超节点,每芯 7×400G、全节点约 6,912 个光模块、卡间 2.8 Tbps、<1µs。代价很直白:整机约 559 kW,约为 GB200 NVL72(约 145 kW)的 3.9 倍、单位能效约差 2.3 倍,但靠规模在总算力上反超——一条"算力受限、电与光不受限"的中国式取舍(Tom's Hardware)。灵衢 2.0 规范已于 2025-09-18 华为全联接大会开放;roadmap 更狂:Atlas 950 超节点 8,192 卡(2026 Q4)、Atlas 960 超节点 15,488 卡(2027 Q4)。
- 光模块龙头的 scale-up 卡位:中际旭创(800G CPO 2025 底试产、1.6T CPO 2026、3.2T 原型送测)、新易盛(与英伟达合作 115.2T CPO 交换)、天孚通信(光引擎全球份额 >60%、光引擎约占 CPO 模块价值 30–40%,最受益)、光迅科技(液冷+CPO 组件)。海外 1.6T 模块 2026 采购量从 1,000 万一路上调到约 2,000 万只。
- 国产 GPU 超节点与光交换:"光跃 LightSphere X"(上海仪电+曦智科技+壁仞+中兴,2025-07)是中国首个"光互连+光交换"GPU 超节点,核心是曦智的分布式光交换 dOCS。曦智科技(占中国独立 scale-up 光互连市场约 88%)2026-04 港股上市首日大涨约 380%。
- 协议同样分立:华为灵衢 UB、阿里 ALink(磐久 AL128/UPN512)、腾讯/ODCC 的 ETH-X(以太网超节点,2025-04 首台原型)——国内尚无统一开放标准。券商测算国产超节点渗透率约 2027 年 45%、2028 年 72%。
九、节奏与市场预期(截至 2026-06)
时间线共识:西方阵营高量级的"光 scale-up"不会早于 2028。英伟达柜内铜撑到 Feynman(约 2028)才上 scale-up CPO;LightCounting 称 scale-up 的 LPO/CPO"2026–27 提速、2028 上量";半导体工程界口径是"大规模光互连架构不太可能早于 2028"。唯一的例外是华为——已在 scale-up 上大规模用光(被制程逼出来的)。
市场预测分歧极大,引用须谨慎:650 Group 估 2030 年 scale-up 互连里 NVLink >250 亿、以太网 >80 亿、PCIe/UALink >30 亿美元;LightCounting 判断"scale-up 的光互连 TAM 将远超 scale-out、CPO 的 TAM 由 scale-up 主导";而中国口径最猛——按弗若斯特沙利文(曦智招股书引用),中国 scale-up 光互连市场 2025 约 57 亿元 → 2030 约 1,805 亿元(CAGR 约 99.6%)。聚合类市调给的"光互连"整体 CAGR 只有约 10–15%,差距源于"铜还能在柜内撑多久"这个根本变量。
十、与五大关注板块的关联
- 光模块(最直接):scale-up 上光是光模块/CPO/光引擎需求的下一个、也是更大的放量源。天孚(光引擎)、中际旭创/新易盛(CPO 模块)、光迅是直接标的;但放量节奏被"铜撑到几时"压着。
- 算力(本体):scale-up 域能多大,直接决定单个训练/推理"超节点"能堆多少 XPU、能跑多大的张量/专家并行——它就是算力的"内部血管"。
- AI 应用(下游):更大的 scale-up 域 = 更大的 MoE、更长上下文、更省的推理,间接决定上层应用的能力上限。关联较间接但方向一致。
(机器人、航天与本主题无实质关联,不强行挂链。)