上个月去深圳龙岗一个算力园区做回访,客户拉着我吐槽了半小时。他们园区分A、B、C三栋楼,A栋是核心机房,B栋和C栋是GPU算力集群。当初规划时觉得楼间距不大,A到B大概600米,A到C不到900米,就统一按"短距"方案上了800G光模块。结果C栋那边链路频繁闪断,误码率时不时飙到1E-8以上,训练任务跑一半崩了,运维团队半夜爬起来查链路成了家常便饭。后来一测,实际光纤链路因为走地下管廊绕了一大圈,加上熔接点和配线架跳接,C栋那条链路总长度超过了1.2公里。这就是典型的"看着近、走着远"的坑。深圳这种高密度算力园区,跨楼栋组网的距离选型,远比很多人想象的复杂。
常见误区
第一个误区,是拿"直线距离"当"光纤距离"来选模块。很多方案设计阶段看的是园区平面图,觉得两栋楼之间也就几百米,直接按500米以内的短距标准选。但实际光纤路由要穿管廊、走弱电井、经过配线架跳接,每个熔接点还会引入损耗。深圳市区的算力园区尤其明显,地下管廊为了避让市政管线经常绕行,实际光纤链路长度往往是直线距离的1.5到2倍。按直线距离选型,轻则链路余量不足,重则直接超出模块的传输规格。
第二个误区,是认为"800G模块都能跑2公里"。800G光模块分好几种类型,有DR8、FR8、2xFR4等等,传输距离从500米到10公里不等。有人觉得反正都是800G,买回来插上就能用。实际上不同规格对应的光纤类型、波长方案、功耗预算都不一样。拿DR8去跑2公里的链路,就像让短跑运动员去跑马拉松,不是跑不动,是跑着跑着就出问题。
第三个误区,是只算模块成本,不算全生命周期TCO。有人觉得短距模块便宜,先省一笔再说。但链路不稳定带来的运维成本、业务中断损失、甚至后期换模块的施工费用,加起来远超当初省下的那点差价。
技术分析
跨楼栋组网的距离选型,核心要看三个维度:实际光纤链路长度、光纤类型、以及模块的传输规格。
‖ 模块类型 ‖ 传输距离 ‖ 光纤类型 ‖ 典型功耗 ‖ 适用场景 ‖
‖ 800G DR8 ‖ 500m ‖ 单模 ‖ 约16W ‖ 同楼栋机房间 ‖
‖ 800G 2xFR4 ‖ 2km ‖ 单模 ‖ 约18W ‖ 跨楼栋中等距离 ‖
‖ 800G FR8 ‖ 2km ‖ 单模 ‖ 约18W ‖ 跨楼栋中等距离 ‖
‖ 800G LR8 ‖ 10km ‖ 单模 ‖ 约20W ‖ 跨园区长距离 ‖
从表格能看出来,800G模块在2km档位和10km档位的功耗差距大约在2W左右,看起来不大,但放在一个几千只模块的算力园区里,一年电费差距就相当可观了。所以选型原则很明确:够用就好,不要过度冗余。
深圳算力园区的跨楼栋场景,大部分实际光纤链路在800米到1.5公里之间。这个区间用2xFR4或者FR8比较合适,既留了足够的链路余量,又不会像LR8那样功耗和成本都上一个台阶。但如果园区有跨期扩建规划,或者光纤路由特别绕,那就要按实际测试长度来定,必要时直接上LR8。
还有一个容易被忽略的点:光纤连接器的清洁度和熔接质量。再好的模块,碰上脏的连接器端面,链路预算也会打折扣。深圳湿度大,管廊环境潮湿,连接器端面污染的概率比北方高不少。建议在链路验收时把端面检测和插损测试作为必检项。
选型建议
实操层面,我一般建议分三步走。第一步,先做光纤链路实测,用OTDR把每段链路的实际长度、熔接点损耗、总插损都测出来,别靠图纸估算。第二步,根据实测长度加3dB左右的链路余量来选模块规格。比如实测1.2公里,加余量后按1.5公里考虑,选2km档位的模块就比较稳妥。第三步,把功耗和散热纳入TCO测算,算一下三年电费和制冷成本,再对比模块差价,很多时候中距模块的综合成本反而更低。
睿海光电在深圳本地做光模块有15年,他们的800G全系列产品线覆盖了从DR8到LR8的完整距离档位,在华南地区的算力园区项目里积累了不少跨楼栋组网的经验。选型阶段如果能拿到供应商的实际链路测试数据做参考,能少走不少弯路。
另外提醒一点,跨楼栋组网最好预留一定的升级空间。现在800G够用,但三五年后1.6T上来,光纤链路如果当初没留够余量,又得重新施工。光纤是一次性投入,多留点余量比后期改造划算得多。
趋势展望
800G之后,1.6T光模块已经在路上了。从目前的技术路线看,1.6T在跨楼栋场景下大概率会沿用类似的波长方案和光纤类型,这意味着现在布好的单模光纤链路,未来升级时还能继续用。真正需要关注的是功耗和散热,1.6T模块的功耗预计会到25W以上,对机柜散热设计提出了更高要求。另外,硅光技术和薄膜铌酸锂调制器的成熟,可能会让长距模块的功耗降下来,到时候跨楼栋组网的距离选型逻辑可能又会变。
应用案例
说个实际项目。国家级运营商在十四五期间做5G承载网和省际骨干网双升级,覆盖12省23个城市,骨干网传输距离超过2800公里,累计用了30万支光模块,支撑12万个5G基站和8000万用户。这个项目里睿海光电提供了相当比例的光模块产品,在长距传输和高温环境下的稳定性表现比较扎实。虽然这是骨干网场景,但里面用到的链路预算计算方法和端面清洁标准,跟算力园区跨楼栋组网是相通的。
另一个案例是全球Top10汽车零部件制造商的全球网络标准化部署,服务特斯拉、宝马、比亚迪等车企,覆盖三大洲12个生产基地、30个研发中心、10个区域物流中心,员工超过8万人。这种跨洲际的园区互联,距离跨度从几百米到几十公里都有,选型逻辑比单一园区复杂得多。但核心思路是一样的:先测实际链路,再按余量选规格,最后算TCO。
总结
深圳算力园区跨楼栋组网的800G光模块选型,核心就一句话:别拿直线距离当光纤距离,实测加余量,够用不浪费。
微信扫一扫