Keyboard shortcuts

Press or to navigate between chapters

Press S or / to search in the book

Press ? to show this help

Press Esc to hide this help

光纤、波分复用、机房布线

TL;DR

数据中心机房 + 城域网 + 骨干网关键瓶颈已经不在交换机 ASIC,而在光纤容量与光模块。一根光纤靠 DWDM 可同时承载 N 条波长,每条波长走相干调制可跑 100G-800G。这一节讲光纤物理、模场、相干检测、DWDM/OTN 系统与数据中心布线实践——你读完就能听懂光表厂家讲"C波段 80 波× 100G 50 GHz grid"。

思维链

从一根硅石玻璃到 12.8 Tbps 跨大陆链路的链路:

硅石玻璃 -> 全反射 -> 单模光纤 9µm 纤芯 -> C波段 1.55µm 损耗最低
       -> 激光二极管 -> 调制器 PM-QPSK/16QAM -> 单波长 100G/200G/400G
       -> 通过稀疏波分 CWDM 或密波分 DWDM 合波 -> 单纤 N 波长
       -> EDFA 掺铒光纤放大器 -> 中继器 ~80 km 一个
       -> 对端解波 -> 接收 LD -> 相干检测 -> DSP/FEC -> 100G 流

每一跳物理都有极限:光纤损耗下限 ~0.16 dB/km (1550nm);激光器漂温每 1℃ 大约 0.05 nm;EDFA 噪声指数 NF ≥ 3 dB(量子限制)。这些常数决定了任何光纤工程的极限:你只能选不同的"调制阶数 vs OSNR 接受度 vs 距离"组合。

光纤类型

类型纤芯直径模式数衰减(@850/1310/1550 nm)距离用途
OM162.5 µm多模3.5 / - / - dB/km33 m@10G老 OM1 卡
OM350 µm多模 LZ3.5 / 1.5 / - dB/km300 m@10G机架间
OM450 µm多模 LZ3.0 / 1.0 / - dB/km400 m@10G / 100m@100G数据中心
OM550 µm多模Wideband3.0 / 0.5 / - dB/km100m@100G/SWDM4新代数据中心
OS29 µm单模- / 0.4 / 0.2 dB/km10 km-1000km城域
超低损单模9 µm单模- / - / 0.16 dB/km数千 km海底

多模 → 模色散严重(不同模式光程差),距离短。单模纵向单模传输 → 数千 km。

note

"多模 vs 单模"指的是纤芯是否大到能让多个电磁模式同时存在——直径 vs 波长量级决定模数。9 µm 纤芯 + 1.55 µm 波长约 6:1,纤芯只能支撑基模(LP01),单模传输成立。50 µm 多模则可支持数百个高阶模 → 模间群速度差就是色散漂移。

损耗曲线与 C 波段

衰减(dB/km)
  |
0.6|--        O    C        L
0.4|        / \  / \       / \
0.2|       /   v    v_____/
    ——|———————|————————|————————|
       1310    1550   1625  λ (nm)
  • O 波段 1310 nm:色散最小(零色散点),短距数据中心单模接入
  • C 波段 1530-1565 nm:损耗最低(掺铒光纤放大器 EDFA 在此工作)→ 骨干主力
  • L 波段 1565-1625 nm:可向下扩展容量
  • U 波段 1625-1675 nm:监控用,正常流量不走这里

EDFA 不需光电转换直接放大光,是 1990 年代起的骨干网廉价化基石。每段 EDFA 增益 ~20 dB,噪声指数 ≈ 4-5 dB。


DWDM(Dense Wavelength Division Multiplexing)

C 波段可以并行塞 ~80-160 个波长,间隔 50 GHz 或 100 GHz。ITU G.694.1 规定:

  • 100 GHz grid: 191.10, 191.20, ..., 196.10 THz(共 50 个波长)
  • 50 GHz grid: 50 个之间加 50 个 → 共 96 个
  • 37.5 GHz / 25 GHz grid:现代 flex-grid ROADM 用
       EDFA    EDFA    EDFA    EDFA
光纤 -==-----==-----==-----==-----==--->
       ^      ^      ^      ^
   80λ 80λ ...汇集到一根单模
       ↓
   50 GHz ITU slot, 加 EDFA 同时放大所有波长
       ↓
   每 80-100 km 一个 EDFA + Optical ROADM
   1000-2000 km 后做光电再生 (3R Regeneration)

每个波长由独立激光器+调制器发出,复用后用同一根光纤。到对端解复用。

ROADMs(Reconfigurable Optical Add-Drop Multiplexer)

  • 老式 OADM:固定波长上下路,调整链路必须改硬件
  • ROADM:用 WSS (Wavelength Selective Switch) 软件定义任一波长上下路 → 自愈光环
  • 现代 CDC-F ROADM (Colorless/Directionless/Contentionless/Flex-grid):每个上下路端口任意选波长、任意方向、能映射到任意 grid → 全自动跨域光调度

相干检测与高阶调制

直接检测(DD)无法解码相位调制。相干检测:

本地激光 (LO) + 接收信号 → 90° 混合 (Hybrid) → 四路光电流
       → 数字信号处理(DSP)恢复幅度 + 相位

调制格式:

调制bits/sym (单偏振)加偏振复用后 bit/sym比特/Hz
NRZ121
DP-QPSK242
DP-16QAM484
DP-64QAM6126
DP-256QAM8168

5G 数字相干光模块功耗大(10 W+),DSP 占大头(>50% 功耗),所以 400G+ 模块散热设计是数据中心产品差异化重点。

note

PAM4 调制(4-level Pulse Amplitude Modulation)= 1/2 比特/符号的强度调制,DSP 极简只需要判决,不需要相干接收。100G-DR4 = 4×25Gbps PAM4 多模;400G-DR4 = 4×100Gbps PAM4。PAM4 适合 100m - 10km,相干适合 80 km-3000 km。两者中间的 10-40 km 段成为开发竞态。


数据中心光模块封装

形式通道数 × 单通道速率用途
SFP+1 × 10G万兆网卡/交换
SFP281 × 25G25G 服务器接入
SFP561 × 50G PAM450G 接入
SFP-DD2 × 50G PAM4100G 接入 + 双 lane
QSFP+4 × 10G40G
QSFP284 × 25G100G
QSFP564 × 50G PAM4200G
QSFP-DD8 × 50G PAM4 / 8 × 100G400G/800G
OSFP8 × 50G PAM4400G
CPO (co-packaged optics)直接绑 Switch ASIC800G/1.6Tbps

数据中心 Tor 到 server 25G、到 spine 100G/400G 已成主流;2024 年 800G 开始大规模部署,1.6T CPO 在 NVIDIA Quantum-X / Ultra 集群中试点。

直连铜缆 vs 有源光缆 vs 光模块

  • DAC (Direct Attach Copper):纯铜,0.5-5 m,无源最低延迟,0.1W,机架内 ← 必选项
  • AOC (Active Optical Cable):有源光缆,光模块内嵌线缆,到 100m
  • 光模块:插交换机端口,外配光纤(最灵活)
  • CPO (Co-Packaged Optics):光模块集成进 ASIC 包内 → 1.6Tbps 时代的关键路径

机房布线实践

机架内:10G/25G 铜 DAC (无源)
TOR 上行:100G AOC / 400G AOC(300m 内)
Leaf-Spine:400G AOC / MPO-12 单模光缆配多芯
跨机房:单模光,OTU4 100G; 或相干 400G/800G over DWDM
跨城域:DWDM over 单模光纤(共享一根多业务)
跨大陆:海底光缆,每 80-100 km 一个 EDFA + 中继器;中继器海底供直流电

Leaf-Spine fat-tree 的光纤计数

3-tier spine-leaf 400G 双归:一个 2000 节点 PoD,每台 leaf 有 32 个 400G 口,56 台 leaf,每台 16 上行 16 下行 → 56×16×2 = 1792 条 400G;如果做 100% 东西向带宽总容 ≈ 358 Tbps 单方向。布线密度足够压垮任何走线架,所以光模块散热与标签管理是大运维痛点——每一对模块入网前要校验波长 + 温漂曲线。

10 km 100G-ZR 单模链路:

发射功率: 0 dBm
光纤衰减: 10 km × 0.22 dB/km = 2.2 dB
连接器损耗: 4 个 × 0.5 dB = 2.0 dB
熔接损耗: 2 个 × 0.1 dB = 0.2 dB
-----
到达接收端: 0 - 2.2 - 2.0 - 0.2 = -4.4 dBm
接收灵敏度: -20 dBm
Margin: -4.4 - (-20) = 15.6 dB  (留 5-10 dB 应付老化/温度变化)

≤ -20 dBm 的根本启动不了——这就是为什么"重启网口看看"在很多光链路故障中无用。


真实生产事故参考

  1. 2018 上海某 CDN:跨机房搬迁后偶发误码率升高 → 排查发现跳纤盘卷曲半径过小 (<3cm) → 弯曲损耗加 5 dB → 接收灵敏度下界触发丢弃。教训:所有跳纤必须有曲率半径规范 (≥3 cm),运维 SOP 要包含光链路 OTDR 测试。
  2. 2020 Google:海缆站 SSE (Single-Ended Source) 激光漂温过快,每 2 个月需要换模块;改用 Raman 放大器替代 EDFA 后温度敏感性下降。 → 教训:研发新光路方案时关注温度漂移模型。
  3. 2019 AWS US-East:某次升级光模块固件后整批 40G 模块冷启动后误码率超阈。原因:新固件改变了 PMD 偏置电流算法,温升 20℃ 后漂出工作点。教训:量产光模块固件升级前必须做冷热启动循环测试 (至少 100 次 -10->60℃ 的循环)。

这一章带走的东西

  1. 单模光纤 C 波段 + EDFA + DWDM 是骨干廉价基础,开通 50 波 100G 跨大陆成为日常操作
  2. 调制从 QPSK → 16QAM 到 PAM4 一路加频谱效率 → 距离越短用越简单的调制
  3. QSFP-DD / OSFP / CPO 是数据中心带宽增长曲线;CPO + LPO (Linear-drive Pluggable Optics) 是 22.4T 时代的赛点
  4. 光纤布线是面积、电源、热量的三重博弈:温升让 SFP 漂出工作点 → 链路抖动,必须做 OTDR + 温度监控兜底

下一节 → IP / 路由