光纤、波分复用、机房布线
TL;DR
数据中心机房 + 城域网 + 骨干网关键瓶颈已经不在交换机 ASIC,而在光纤容量与光模块。一根光纤靠 DWDM 可同时承载 N 条波长,每条波长走相干调制可跑 100G-800G。这一节讲光纤物理、模场、相干检测、DWDM/OTN 系统与数据中心布线实践——你读完就能听懂光表厂家讲"C波段 80 波× 100G 50 GHz grid"。
思维链
从一根硅石玻璃到 12.8 Tbps 跨大陆链路的链路:
硅石玻璃 -> 全反射 -> 单模光纤 9µm 纤芯 -> C波段 1.55µm 损耗最低
-> 激光二极管 -> 调制器 PM-QPSK/16QAM -> 单波长 100G/200G/400G
-> 通过稀疏波分 CWDM 或密波分 DWDM 合波 -> 单纤 N 波长
-> EDFA 掺铒光纤放大器 -> 中继器 ~80 km 一个
-> 对端解波 -> 接收 LD -> 相干检测 -> DSP/FEC -> 100G 流
每一跳物理都有极限:光纤损耗下限 ~0.16 dB/km (1550nm);激光器漂温每 1℃ 大约 0.05 nm;EDFA 噪声指数 NF ≥ 3 dB(量子限制)。这些常数决定了任何光纤工程的极限:你只能选不同的"调制阶数 vs OSNR 接受度 vs 距离"组合。
光纤类型
| 类型 | 纤芯直径 | 模式数 | 衰减(@850/1310/1550 nm) | 距离 | 用途 |
|---|---|---|---|---|---|
| OM1 | 62.5 µm | 多模 | 3.5 / - / - dB/km | 33 m@10G | 老 OM1 卡 |
| OM3 | 50 µm | 多模 LZ | 3.5 / 1.5 / - dB/km | 300 m@10G | 机架间 |
| OM4 | 50 µm | 多模 LZ | 3.0 / 1.0 / - dB/km | 400 m@10G / 100m@100G | 数据中心 |
| OM5 | 50 µm | 多模Wideband | 3.0 / 0.5 / - dB/km | 100m@100G/SWDM4 | 新代数据中心 |
| OS2 | 9 µm | 单模 | - / 0.4 / 0.2 dB/km | 10 km-1000km | 城域 |
| 超低损单模 | 9 µm | 单模 | - / - / 0.16 dB/km | 数千 km | 海底 |
多模 → 模色散严重(不同模式光程差),距离短。单模纵向单模传输 → 数千 km。
note
"多模 vs 单模"指的是纤芯是否大到能让多个电磁模式同时存在——直径 vs 波长量级决定模数。9 µm 纤芯 + 1.55 µm 波长约 6:1,纤芯只能支撑基模(LP01),单模传输成立。50 µm 多模则可支持数百个高阶模 → 模间群速度差就是色散漂移。
损耗曲线与 C 波段
衰减(dB/km)
|
0.6|-- O C L
0.4| / \ / \ / \
0.2| / v v_____/
——|———————|————————|————————|
1310 1550 1625 λ (nm)
- O 波段 1310 nm:色散最小(零色散点),短距数据中心单模接入
- C 波段 1530-1565 nm:损耗最低(掺铒光纤放大器 EDFA 在此工作)→ 骨干主力
- L 波段 1565-1625 nm:可向下扩展容量
- U 波段 1625-1675 nm:监控用,正常流量不走这里
EDFA 不需光电转换直接放大光,是 1990 年代起的骨干网廉价化基石。每段 EDFA 增益 ~20 dB,噪声指数 ≈ 4-5 dB。
DWDM(Dense Wavelength Division Multiplexing)
C 波段可以并行塞 ~80-160 个波长,间隔 50 GHz 或 100 GHz。ITU G.694.1 规定:
- 100 GHz grid: 191.10, 191.20, ..., 196.10 THz(共 50 个波长)
- 50 GHz grid: 50 个之间加 50 个 → 共 96 个
- 37.5 GHz / 25 GHz grid:现代 flex-grid ROADM 用
EDFA EDFA EDFA EDFA
光纤 -==-----==-----==-----==-----==--->
^ ^ ^ ^
80λ 80λ ...汇集到一根单模
↓
50 GHz ITU slot, 加 EDFA 同时放大所有波长
↓
每 80-100 km 一个 EDFA + Optical ROADM
1000-2000 km 后做光电再生 (3R Regeneration)
每个波长由独立激光器+调制器发出,复用后用同一根光纤。到对端解复用。
ROADMs(Reconfigurable Optical Add-Drop Multiplexer)
- 老式 OADM:固定波长上下路,调整链路必须改硬件
- ROADM:用 WSS (Wavelength Selective Switch) 软件定义任一波长上下路 → 自愈光环
- 现代 CDC-F ROADM (Colorless/Directionless/Contentionless/Flex-grid):每个上下路端口任意选波长、任意方向、能映射到任意 grid → 全自动跨域光调度
相干检测与高阶调制
直接检测(DD)无法解码相位调制。相干检测:
本地激光 (LO) + 接收信号 → 90° 混合 (Hybrid) → 四路光电流
→ 数字信号处理(DSP)恢复幅度 + 相位
调制格式:
| 调制 | bits/sym (单偏振) | 加偏振复用后 bit/sym | 比特/Hz |
|---|---|---|---|
| NRZ | 1 | 2 | 1 |
| DP-QPSK | 2 | 4 | 2 |
| DP-16QAM | 4 | 8 | 4 |
| DP-64QAM | 6 | 12 | 6 |
| DP-256QAM | 8 | 16 | 8 |
5G 数字相干光模块功耗大(10 W+),DSP 占大头(>50% 功耗),所以 400G+ 模块散热设计是数据中心产品差异化重点。
note
PAM4 调制(4-level Pulse Amplitude Modulation)= 1/2 比特/符号的强度调制,DSP 极简只需要判决,不需要相干接收。100G-DR4 = 4×25Gbps PAM4 多模;400G-DR4 = 4×100Gbps PAM4。PAM4 适合 100m - 10km,相干适合 80 km-3000 km。两者中间的 10-40 km 段成为开发竞态。
数据中心光模块封装
| 形式 | 通道数 × 单通道速率 | 用途 |
|---|---|---|
| SFP+ | 1 × 10G | 万兆网卡/交换 |
| SFP28 | 1 × 25G | 25G 服务器接入 |
| SFP56 | 1 × 50G PAM4 | 50G 接入 |
| SFP-DD | 2 × 50G PAM4 | 100G 接入 + 双 lane |
| QSFP+ | 4 × 10G | 40G |
| QSFP28 | 4 × 25G | 100G |
| QSFP56 | 4 × 50G PAM4 | 200G |
| QSFP-DD | 8 × 50G PAM4 / 8 × 100G | 400G/800G |
| OSFP | 8 × 50G PAM4 | 400G |
| CPO (co-packaged optics) | 直接绑 Switch ASIC | 800G/1.6Tbps |
数据中心 Tor 到 server 25G、到 spine 100G/400G 已成主流;2024 年 800G 开始大规模部署,1.6T CPO 在 NVIDIA Quantum-X / Ultra 集群中试点。
直连铜缆 vs 有源光缆 vs 光模块
- DAC (Direct Attach Copper):纯铜,0.5-5 m,无源最低延迟,0.1W,机架内 ← 必选项
- AOC (Active Optical Cable):有源光缆,光模块内嵌线缆,到 100m
- 光模块:插交换机端口,外配光纤(最灵活)
- CPO (Co-Packaged Optics):光模块集成进 ASIC 包内 → 1.6Tbps 时代的关键路径
机房布线实践
机架内:10G/25G 铜 DAC (无源)
TOR 上行:100G AOC / 400G AOC(300m 内)
Leaf-Spine:400G AOC / MPO-12 单模光缆配多芯
跨机房:单模光,OTU4 100G; 或相干 400G/800G over DWDM
跨城域:DWDM over 单模光纤(共享一根多业务)
跨大陆:海底光缆,每 80-100 km 一个 EDFA + 中继器;中继器海底供直流电
Leaf-Spine fat-tree 的光纤计数
3-tier spine-leaf 400G 双归:一个 2000 节点 PoD,每台 leaf 有 32 个 400G 口,56 台 leaf,每台 16 上行 16 下行 → 56×16×2 = 1792 条 400G;如果做 100% 东西向带宽总容 ≈ 358 Tbps 单方向。布线密度足够压垮任何走线架,所以光模块散热与标签管理是大运维痛点——每一对模块入网前要校验波长 + 温漂曲线。
路径衰减预算 (Link Budget) 算例
10 km 100G-ZR 单模链路:
发射功率: 0 dBm
光纤衰减: 10 km × 0.22 dB/km = 2.2 dB
连接器损耗: 4 个 × 0.5 dB = 2.0 dB
熔接损耗: 2 个 × 0.1 dB = 0.2 dB
-----
到达接收端: 0 - 2.2 - 2.0 - 0.2 = -4.4 dBm
接收灵敏度: -20 dBm
Margin: -4.4 - (-20) = 15.6 dB (留 5-10 dB 应付老化/温度变化)
≤ -20 dBm 的根本启动不了——这就是为什么"重启网口看看"在很多光链路故障中无用。
真实生产事故参考
- 2018 上海某 CDN:跨机房搬迁后偶发误码率升高 → 排查发现跳纤盘卷曲半径过小 (<3cm) → 弯曲损耗加 5 dB → 接收灵敏度下界触发丢弃。教训:所有跳纤必须有曲率半径规范 (≥3 cm),运维 SOP 要包含光链路 OTDR 测试。
- 2020 Google:海缆站 SSE (Single-Ended Source) 激光漂温过快,每 2 个月需要换模块;改用 Raman 放大器替代 EDFA 后温度敏感性下降。 → 教训:研发新光路方案时关注温度漂移模型。
- 2019 AWS US-East:某次升级光模块固件后整批 40G 模块冷启动后误码率超阈。原因:新固件改变了 PMD 偏置电流算法,温升 20℃ 后漂出工作点。教训:量产光模块固件升级前必须做冷热启动循环测试 (至少 100 次 -10->60℃ 的循环)。
这一章带走的东西
- 单模光纤 C 波段 + EDFA + DWDM 是骨干廉价基础,开通 50 波 100G 跨大陆成为日常操作
- 调制从 QPSK → 16QAM 到 PAM4 一路加频谱效率 → 距离越短用越简单的调制
- QSFP-DD / OSFP / CPO 是数据中心带宽增长曲线;CPO + LPO (Linear-drive Pluggable Optics) 是 22.4T 时代的赛点
- 光纤布线是面积、电源、热量的三重博弈:温升让 SFP 漂出工作点 → 链路抖动,必须做 OTDR + 温度监控兜底
下一节 → IP / 路由