做浸没式液冷项目的人手里一定都翻过这三瓶液体氟化液、矿物油、改性硅油。甲方或者采购同事问我的问题也出奇一致这三种冷却液到底分别配多少瓦的浸没式液冷光模块坦白说这个问题第一眼看着简单真回答起来很容易翻车。因为大多数人默认按闪点高低和能不能泡电路板来选但真正决定功率等级的其实是传热系数、粘度、材料兼容性和运维成本这四件事。光模块功率从100G时代的3.5W涨到800G的16W甚至更高以后冷却液选错光模块不是热死就是脏死两者都很棘手。这篇文章我不打算只给一张几瓦配什么液体的对照表而是把三种冷却液各自的传热逻辑、化学特性、实战场景拆开讲清楚再给出我实际验证过的测试方法和运维细节。无论你是做液冷系统设计、机房改造还是买光模块回来自己搭平台做测试这篇都可以直接作为选型参考。1. 光模块功耗逼近风冷极限浸没式液冷才会盯上这块区域1.1 光模块功耗是怎么一步步涨起来的光模块功耗这条曲线这几年走得非常陡。早期10G/25G可插拔光模块功耗只有3.5W到4W左右交换机面板上一排排塞满也没太大散热压力。到了100G QSFP28时代典型功耗约3.5W到5W依然可以靠风冷压住。真正开始吃力的是400GQSFP-DD封装下的400G模块典型功耗已经到8W到12W有些早期方案甚至能到14W。800G时代就更夸张QSFP-DD的800G光模块普遍在16W到20WOSFP封装则能到18W到24W。等到1.6T或者CPO配套的外部光源模块ELSFP这类产品出现功耗逼近25W到35W基本是板上钉钉的事。这就是浸没式液冷光模块从可选变成必要的原因——不是大家想不想上的问题是风冷快压不住了。有朋友可能会说单看功耗绝对值不高啊CPU一颗都两三百瓦光模块二三十瓦算什么问题在于热流密度和散热环境。光模块安装位置在交换机前面板本来就在风道末端又被光纤线缆层层挡住进风量天生不足。而模块内部激光器、驱动芯片和DSP的热源高度集中壳体温升受限通常要求外壳温度控制在70℃以内部分800G模块甚至要求60℃以下。这些约束叠加在一起空气换热系数就是跟不上。1.2 浸没式液冷进入光模块区的真实推动力浸没式液冷之所以被推进到光模块区不只是因为模块功耗高还因为它能解决冷板液冷解决不了的几个问题。冷板液冷通常只能覆盖CPU、GPU这类大热源光模块在面板外侧冷板不好贴水管不好走光纤还要维护插拔。而浸没式是把整个交换机主板连同光模块泡在冷却液里光模块区域的热量直接被液体带走不需要为模块单独设计复杂水道和安装面。另一个推动力是整柜功率密度。一个高密度800G交换机面板插满64个端口光模块总功耗轻松超过1000W如果加上交换芯片和CPU整柜功率密度很容易冲到30kW到50kW。这种场景下浸没式液冷对整个机柜的热管理更友好运维侧也会更倾向于统一用液冷把热点抹平。所以我们在讨论三种冷却液各配多少瓦光模块之前先得明确一个前提冷却液要承担的不只是光模块那点热量还要和整个液冷系统的流道设计、泵流量、过滤精度联动。光模块只是其中一个敏感部件但它对冷却液的洁净度和化学兼容性极其敏感这一点恰恰是很多选型方案里被低估的。2. 三种冷却液的物性底牌和传热逻辑先看数据再谈结论2.1 主流浸没式冷却物的核心物性对比讨论功率匹配绕不开热物理参数。我先把三种冷却液在典型牌号下的核心物性列出来。需要说明的是以下数值在不同厂家、不同牌号之间会有一定浮动氟化液里的单相电子氟化液和全氟聚醚差距不小矿物油里的变压器油和白油也不一样改性硅油更是有甲基硅油、苯基硅油、烷基改性等分支所以我把区间写出来更有参考性。参数氟化液单相电子氟化液矿物油白油/变压器油基改性硅油苯基/烷基改性导热系数 W/(m·K)0.06 - 0.070.13 - 0.150.11 - 0.15比热容 kJ/(kg·K)1.0 - 1.11.6 - 2.11.4 - 1.7密度 g/cm³1.6 - 1.80.8 - 0.90.9 - 1.0运动粘度 cSt25℃0.7 - 55 - 305 - 50可调范围更大介电强度很好较好但易受水分影响好闪点多数无闪点140℃ - 200℃以上通常大于250℃单位体积带热能力相对低高中高材料兼容性对部分塑料/胶体有溶胀对橡胶、涂层、光纤涂覆层风险较大对硅橡胶类有溶胀风险价格量级每升数百至上千元几十元数百元长期运维压力挥发损失、补液贵脏污、氧化、需过滤较稳定温度窗口宽这张表的信息量很大我挑几个关键点展开说。2.2 氟化液低粘度高成本适合少量热、高洁净场景氟化液的传热逻辑和另外两种完全不同。它的导热系数在三种液体里垫底单位体积比热容也低但因为密度大、粘度极低同样功率的泵可以推动它做高速湍流靠流速把换热系数拉起来。低粘度还有一个好处能钻进光模块外壳散热齿的细缝隙里把齿根处的热界面带走。不过它的换热量是有上限的。低沸点牌号可以做两相浸没利用相变潜热把换热量做得极高而单相氟化液在高功率密度下的表现就比较吃流速如果流道设计不好光模块周围形成低速区热反而排不出去。氟化液最大的价值其实是材料兼容、电绝缘和洁净度。它本身化学惰性高对大多数金属、陶瓷、PCB基材都很友好挥发后不留残渣不会在透镜镀膜上留下油膜。代价是贵而且蒸汽压较高、有挥发损耗系统需要密封和补液。这决定了氟化液的天然适配段光模块功耗分布在8W到12W整柜热量密度可控又对光路洁净度要求高的场景。低功耗模块用氟化液用量没那么大成本压力小高功耗模块用氟化液要么上两相要么把流量和流道做到极致综合成本会直线上升。2.3 矿物油高比热高导热的大力士维护压力甩不掉矿物油的传热数据在三种液体里是最亮眼的导热系数是氟化液的两倍以上比热容也高这意味着在相同流量下矿物油从光模块表面带走的热量明显更多。20W级别的800G光模块矿物油只要流量跟得上模块壳温可以被压得相当漂亮。但矿物油的缺陷一样突出。首先是粘度大尤其低温下粘度会成倍增加。北方机房如果冬天停机后再启动冷却液温度降到10℃以下矿物油流动性直线下降光模块区域的流量如果不足局部温度会迅速走高。其次是干净度问题矿物油本身就是复杂烃类混合物长期高温运行会有氧化变质风险产生油泥和酸性物质。矿物油还会在光学透镜上形成油膜在光纤涂覆层和胶粘剂上产生溶胀或渗透这个问题我在后面专门讲它比高温还要致命。矿物油的性价比决定了它的战场是中功率、预算敏感、运维团队能扛得住定期维护的场景。坦白说在10W到25W这个区间矿物油是很多液冷厂商愿意尝试的方案因为它便宜、好买、传热好。前提是过滤系统、旁路加热系统、清洗维护计划都要提前设计进去缺一个光模块就会先遭殃。2.4 改性硅油温度窗口和化学惰性让它在高功率下更稳改性硅油是我个人在近几年项目里越来越看好的一个方向。它是在硅油基础上通过烷基、苯基改性来调整粘度和低温流动性继承硅油耐高温、化学稳定、不易氧化炭化的优点又克服了纯硅油低温下变稠、粘温性差的毛病。在传热方面改性硅油导热系数介于矿物油和氟化液之间比热容也比较可观单位体积带热能力属于中上水平。它的粘度可选择范围很宽低粘度的改性硅油在5cSt级别依然比矿物油更容易泵送高粘度的则适合需要挂壁润滑的场合。改性硅油真正的王牌是高温稳定性。光模块功耗到了25W以上壳体附近冷却液温度可能长期工作在65℃到80℃甚至更高。矿物油在这个温度下长时间运行氧化问题会加速暴露氟化液虽然耐温也可以但单相换热能力不够、成本太高。改性硅油可以在这个温度窗口长期稳定运行不会产生油泥也不容易在光学表面形成难以清除的残膜。所以改性硅油的适配段很清晰高功率、高密度、长期高温运行的光模块集群。成本居中运维省心化学风险比矿物油低一个台阶。它唯一的短板是材料兼容性对含硅橡胶的密封圈、部分硅胶保护胶有溶胀倾向选型时要把模块内部的胶种搞清楚。3. 功率等级匹配表10W以下、10-25W、25W以上的分界线3.1 直接给一张推荐关系表先出结论性质的表后面再讲理由。这张表是基于我在实际项目中的观察结合典型光模块封装和功耗做的推荐适合作为选型起点。光模块类型典型功耗范围推荐冷却液推荐理由100G QSFP28 / 400G QSFP-DD早期3.5W - 10W氟化液单相发热不大重点保光路洁净成本可控400G QSFP-DD / 800G QSFP-DD10W - 16W氟化液或矿物油氟化液保稳矿物油走量看预算和维护能力800G OSFP / 高功率QSFP-DD16W - 24W矿物油或改性硅油需要更大换热能力矿物油性价比高改性硅油更稳1.6T OSFP-XD / CPO外部光源模块25W - 35W改性硅油或两相氟化液热流密度极大需要高耐温、低维护的介质这张表只是一个骨架真正的分界线不是功耗刚好卡在哪个数字而是液体带热能力能不能满足模块壳温约束。3.2 10W以内氟化液为主的低功耗区兼容性优先10W以内这个区间光模块本身还没到风冷完全压不住的地步。之所以还要做浸没通常是为了实现整机柜统一液冷架构而不是因为单个模块热到不行。这个时候选氟化液是性价比最优的思路。原因很简单功耗低意味着不需要借助矿物油的高比热和高导热氟化液的低粘度足以带走热量而氟化液带来的高洁净度、低残留、强绝缘让光模块的光学链路和电路寿命更有保障。另外这个功率段对冷却液用量少氟化液单价高的缺点被摊薄了。实操中我有一个经验100G/400G混插的旧机房改造如果系统本来就是氟化液单相浸没光模块不用特地去换液冷专用型号只要做好模块气密性检查和透镜保护一般都能顺利运行。但要注意氟化液对某些塑料外壳、标签油墨、密封胶仍然有溶胀风险上机前做小样浸泡是必须的。3.3 10-25W矿物油的价值区间前提是管路和过滤跟上10W到25W这一段是当前800G光模块的主战场也是矿物油最有价值感的区间。以800G QSFP-DD为例典型功耗16W到20W。这个发热量如果只用氟化液单相冷却需要比较高的流速才能压住壳温如果用两相氟化液系统成本和密封要求又上去了。矿物油则靠高导热系数和高比热占尽便宜在相同流量下能带走更多热量性价比十分突出。但我要强调矿物油在这个功率段能不能用住三分看液体本身七分看系统配套。前面提到的低温冷启动、过滤、油膜残留问题任何一个没有预案光模块都会先出现光功率漂移。我见过一个测试平台800G模块泡在矿物油里开始两天数据很漂亮到第三天Rx光功率掉了1.2dB拆开一看透镜上蒙了一层油膜光纤插芯周围还有絮状析出物。这个场景不是矿物油能不能用的问题是系统没做过滤和维护的问题。在这个功率段如果选择矿物油我建议泵出口装不低于10μm的过滤精度有条件就上5μm系统加旁路加热或低粘度白油保证低温启动流量光模块区预留光学清洗接口方便定期维护。3.4 25W以上改性硅油和两相氟化液的选择题到了25W以上就是1.6T、CPO外部光源这类高功率光模块的领域矿物油开始力不从心。原因有三一是换热需求大油系统需要极高流量流道压力损失和泵功耗水涨船高二是模块附近油温高矿物油氧化变质的加速度会增加三是如果模块内部局部热点过高矿物油的对流换热系数很难再往上走。改性硅油在这个段位的优势就很明显。它的耐温上限高长时间运行不会炭化结垢粘度可选范围广能根据流道设计定制低粘度牌号来降低流动阻力。我之前在一个1.6T光模块的测试台架上把改性硅油系统流量控制在能维持模块壳温65℃以内连续跑了一个月透镜表面没有形成可见油膜光功率漂移控制在0.3dB以内这个表现让我后续的高功率项目都优先考虑它。两相氟化液则是武力值更高的选项靠沸腾潜热把换热量直接拉满特别适合局部热流密度已经到了单相介质怎么吹都压不住的极端场景。代价是系统必须密封蒸汽回收和冷凝回路都要做补液成本高运维复杂度也大。在光模块这个部件上除非功耗到了30W以上且对壳温要求极苛刻否则我不太建议一上来就上两相。3.5 一个容易忽略的陷阱只看模块功耗不看整柜热设计另外还要提一个我在不少选型文档里看到过的误区只看光模块的标称功耗然后拿一个每瓦需要多少流量的经验值去套冷却液选型。实际上同一个24W的800G光模块如果交换机面板气流组织很差、周边还有高功率交换芯片的余热倒灌壳温和透镜温度会比理论值高不少。反过来如果液冷流道设计得好光模块周围冷却液流速高24W的模块甚至可以用16W模块那套冷却液配置。所以功率等级只是参考坐标系真正的选型依据是模块壳温约束 冷却液在模块表面的实际对流换热能力。4. 光学污染浸没式液冷光模块最容易翻车的环节4.1 光模块里的材料看着简单其实处处是薄弱点很多做液冷的人对光模块的第一印象是一块PCB加一个金属壳泡进液体里应该没事。但真实的光模块内部比想象中复杂得多。从光模块原理图和耦合结构看一条完整链路是激光器发光经过透镜耦合进光纤光纤另一端出来再经过透镜耦合进探测器。中间可能还有隔离器、WDM滤光片、反射镜这些光学元件。激光器和探测器旁边的透镜表面都镀了增透膜滤光片是精密的介质膜层这些光学面的洁净度要求极高哪怕一层肉眼几乎看不见的油膜都会显著改变光的透过率和反射率。材料层面光模块外壳通常是锌合金或铝合金加镀镍处理内部有FR4 PCB、密封胶、光纤涂覆层和尾套。不同冷却液和这些材料的化学反应路径完全不同。氟化液容易对部分塑料和胶体产生溶胀矿物油对橡胶密封圈和光纤涂覆层有溶胀风险还可能让标签油墨褪色、脱落改性硅油对含硅橡胶的密封件有软化倾向。实际项目中我最担心的是导热界面材料、密封胶和结构件里的硅酮类物质。光模块里的胶水如果被矿物油或硅油溶胀轻则密封性能下降重则胶体析出颗粒物悬浮在冷却液中随着循环流直接糊到透镜上。4.2 单模、多模和BIDI光模块对污染的容忍度完全不同同样是光学污染问题不同类型的模块表现差异巨大这也是选型时要分别讨论的原因。单模光模块的模场直径约9μm光束在透镜处的汇聚光斑极小透镜表面哪怕沾上一个亚微米级的颗粒或一层薄油膜耦合效率都会明显下降链路损耗会增大几个dB。多模模块的纤芯直径有50μm甚至62.5μm对同样污染物的容忍度就高不少有时候光功率下降0.3dB到0.5dB都不容易察觉。BIDI光模块更特殊。BIDI是在一根光纤里同时收发光信号模块内部有WDM滤光片把不同波长分开。滤光片通常是倾斜45度放置的介质膜片对入射角度和表面状态极度敏感。如果冷却液在滤光片表面留下油膜光的反射和透射特性会改变可能导致收发光串扰增大、插损突增甚至直接出现误码。所以我的建议是在评估冷却液的时候不要只拿一个多模模块做浸泡测试就算完事必须把单模、多模、BIDI各拿一只同测。否则很容易得出这种冷却液完全没问题的错误结论——只是因为你测的那个模块对污染不敏感而已。4.3 用mlxlink -m/-c做浸泡前后的光路体检光学污染和温度异常不能靠眼睛看要靠数字诊断。在Mellanox网卡平台上mlxlink工具是我做浸没实验时最常用的体检手段。具体操作上先把光模块插在网卡端口用mlxlink -d mlx5_x -m读取模块实时状态。这个命令可以拿到光模块类型、制造商、序列号、当前温度和收发光功率以及偏置电流和告警阈值输出里能看到Tx Power、Rx Power、Temperature、Vcc这些关键字段。再配合mlxlink -d mlx5_x -c看线缆信息能读出线缆类型是光缆还是铜缆、线缆长度、连接器状态。我建议的测试节奏是浸泡前先在常温空气环境下记录一组基线包括模块温度、Tx/Rx光功率、偏置电流刚浸泡进水后1小时、4小时、24小时分别再记录观察是否有短时冲击之后每天固定时间记录一次至少要跑72小时每次同时记录冷却液温度和流速把变量控制在同一水平。诊断数据怎么看重点是两部分一是模块内部温度是否比同功耗风冷时明显下降这能验证冷却液带热能力二是Tx和Rx光功率是否出现明显漂移。光功率漂移如果在0.3dB以内属于正常波动超过0.5dB就要警觉超过1dB基本就是透镜污染或耦合变化需要停机检查。浸泡后如果模块温度正常但Rx光功率一直在缓慢下降而Tx功率没什么变化那大概率是接收端透镜或滤光片表面出了问题。命令本身很简单难的是把数据和时间、工况对应起来。我给自己的要求是每次记录时都拍下冷却液当前温度、流速设置、泵频率这样才能还原问题到底出在传热还是出在污染。另外要提醒一句不同网卡固件版本对mlxlink的支持有差异跑之前先mlxlink -h确认参数可用性不要在生产环境上临时摸索。5. 我的浸没实验步骤与三个容易忽略的运维细节5.1 先做浸泡台架实验别直接上机无论最终选哪种冷却液我都强烈建议先做一个几十到上百升规模的小台架实验而不是直接把整个机柜泡进去。台架实验可以帮助你在几周内拿到大量真实数据成本远低于整柜翻车后的清洗和返工。具体流程可以参考我这边用过的一套做法准备一个带循环泵、过滤器和加热棒的实验槽装入选定的冷却液放入至少三只光模块一只多模、一只单模、一只BIDI全部插上光纤并连接到测试端用可调负载或真实流量跑起来让光模块功耗尽量贴近目标工况按温度梯度测试先25℃常温跑24小时再逐步升到50℃、65℃每个温度点稳定8小时以上观察光功率和温度是否有突变最后做一次低温循环模拟机房停电后重新启动看冷却液低温粘稠会不会导致流量骤降实验结束后立即拆检模块重点看透镜表面、滤光片、密封胶和外壳镀层状态。这个流程看着繁琐但能一次把传热能力、材料兼容、低温启动、光学污染四个问题都覆盖掉。5.2 三个容易忽略的运维问题低温粘稠、过滤、补液和排气台架实验之后真正上线运行还要应对三个我踩过坑的运维问题。第一是低温粘稠。矿物油最明显温度降到10℃以下粘度可能翻倍泵如果没做变频补偿光模块区流量会不够模块壳温悄悄往上走。改性硅油也有这个问题只是程度轻一些。解决思路是加旁路加热管或者在停机策略里设定保持循环不关机实在要停机重启前先让冷却液循环自热到一定温度再加载业务。第二是过滤精度。矿物油系统里光模块附近最适合装高精度过滤器因为光模块对颗粒物尤其敏感。一个小颗粒堵在光纤端面或者卡在连接器里光功率可能瞬间掉好几个dB。过滤精度建议10μm起步有条件直接上5μm滤芯更换周期要根据实验数据定不能照搬供应商给的默认值。第三是补液和排气。氟化液体系挥发损耗明显需要自动补液装置矿物油和改性硅油挥发性低但管路接头、泵轴密封处会有微渗。系统里如果溶解了空气气泡流经高温光模块表面会加剧局部热阻波动所以高位膨胀罐和排气阀是标配不要省。5.3 分区与流道安排光模块区要不要跟CPU区共用回路最后一个运维层面的问题光模块区和CPU/交换芯片区到底共用一套冷却液回路还是分成独立支路我自己的倾向是预算允许的情况下光模块区尽量独立一个支路哪怕用同一个泵站缸体也建议单独做一套过滤和流量调节。原因是光模块对冷却液的洁净度要求高于CPU和交换芯片而交换芯片区更容易产生热量波动和颗粒物。如果共用一套回路不做分区CPU区搅起来的杂质会直接带到光模块表面透镜污染的风险会明显增大。如果机柜空间限制没法做完全独立回路至少要做到分区过滤和分区流量计。光模块支路流量要能单独调节因为交换机前面板的流道压力损失和主板区不一样一个泵带全程时很容易出现光模块区流量不足但CPU区流量过剩的情况。6. 我的选型思路和实际体会最后想说几句把前面的内容收拢一下我在实际项目里最终形成的选型逻辑是先确认光模块封装形态和真实功耗再定工作温度窗口然后评估运维团队能承受的维护等级最后才去看冷却液单价。如果让我给一个最简洁的方向我的建议是这样10W以内的400G及以下光模块优先氟化液图的是省心和光路干净10W到25W的800G场景矿物油的性价比确实诱人但前提是你敢把过滤和清洗计划做成制度25W以上的1.6T和CPO外部光源场景改性硅油的长期稳定性更值得依赖两相氟化液留给那种不用成本说话的极端项目。我个人踩过最深的坑是08年一个800G模块测试项目当时迷信矿物油的高导热数据直接上机跑业务结果第三天开始出现零星光功率告警排查了一整天才发现透镜油膜问题。后来重新做了台架实验才意识到光模块这种带精密光学器件的设备和CPU完全不是一个评判维度——传热好只是入门门票光学污染才是决定成败的关卡。所以如果你正在做浸没式液冷光模块的选型我真心建议一句别只看冷却液的规格书拿几只单模、多模、BIDI光模块去做一个月浸泡测试用mlxlink把光功率和温度基线记录下来你会比任何选型表都更清楚自己该用什么液体。这个预处理步骤是我目前能给出的性价比最高的经验。
浸没式液冷光模块冷却液选型：氟化液、矿物油、改性硅油怎么配？
做浸没式液冷项目的人手里一定都翻过这三瓶液体氟化液、矿物油、改性硅油。甲方或者采购同事问我的问题也出奇一致这三种冷却液到底分别配多少瓦的浸没式液冷光模块坦白说这个问题第一眼看着简单真回答起来很容易翻车。因为大多数人默认按闪点高低和能不能泡电路板来选但真正决定功率等级的其实是传热系数、粘度、材料兼容性和运维成本这四件事。光模块功率从100G时代的3.5W涨到800G的16W甚至更高以后冷却液选错光模块不是热死就是脏死两者都很棘手。这篇文章我不打算只给一张几瓦配什么液体的对照表而是把三种冷却液各自的传热逻辑、化学特性、实战场景拆开讲清楚再给出我实际验证过的测试方法和运维细节。无论你是做液冷系统设计、机房改造还是买光模块回来自己搭平台做测试这篇都可以直接作为选型参考。1. 光模块功耗逼近风冷极限浸没式液冷才会盯上这块区域1.1 光模块功耗是怎么一步步涨起来的光模块功耗这条曲线这几年走得非常陡。早期10G/25G可插拔光模块功耗只有3.5W到4W左右交换机面板上一排排塞满也没太大散热压力。到了100G QSFP28时代典型功耗约3.5W到5W依然可以靠风冷压住。真正开始吃力的是400GQSFP-DD封装下的400G模块典型功耗已经到8W到12W有些早期方案甚至能到14W。800G时代就更夸张QSFP-DD的800G光模块普遍在16W到20WOSFP封装则能到18W到24W。等到1.6T或者CPO配套的外部光源模块ELSFP这类产品出现功耗逼近25W到35W基本是板上钉钉的事。这就是浸没式液冷光模块从可选变成必要的原因——不是大家想不想上的问题是风冷快压不住了。有朋友可能会说单看功耗绝对值不高啊CPU一颗都两三百瓦光模块二三十瓦算什么问题在于热流密度和散热环境。光模块安装位置在交换机前面板本来就在风道末端又被光纤线缆层层挡住进风量天生不足。而模块内部激光器、驱动芯片和DSP的热源高度集中壳体温升受限通常要求外壳温度控制在70℃以内部分800G模块甚至要求60℃以下。这些约束叠加在一起空气换热系数就是跟不上。1.2 浸没式液冷进入光模块区的真实推动力浸没式液冷之所以被推进到光模块区不只是因为模块功耗高还因为它能解决冷板液冷解决不了的几个问题。冷板液冷通常只能覆盖CPU、GPU这类大热源光模块在面板外侧冷板不好贴水管不好走光纤还要维护插拔。而浸没式是把整个交换机主板连同光模块泡在冷却液里光模块区域的热量直接被液体带走不需要为模块单独设计复杂水道和安装面。另一个推动力是整柜功率密度。一个高密度800G交换机面板插满64个端口光模块总功耗轻松超过1000W如果加上交换芯片和CPU整柜功率密度很容易冲到30kW到50kW。这种场景下浸没式液冷对整个机柜的热管理更友好运维侧也会更倾向于统一用液冷把热点抹平。所以我们在讨论三种冷却液各配多少瓦光模块之前先得明确一个前提冷却液要承担的不只是光模块那点热量还要和整个液冷系统的流道设计、泵流量、过滤精度联动。光模块只是其中一个敏感部件但它对冷却液的洁净度和化学兼容性极其敏感这一点恰恰是很多选型方案里被低估的。2. 三种冷却液的物性底牌和传热逻辑先看数据再谈结论2.1 主流浸没式冷却物的核心物性对比讨论功率匹配绕不开热物理参数。我先把三种冷却液在典型牌号下的核心物性列出来。需要说明的是以下数值在不同厂家、不同牌号之间会有一定浮动氟化液里的单相电子氟化液和全氟聚醚差距不小矿物油里的变压器油和白油也不一样改性硅油更是有甲基硅油、苯基硅油、烷基改性等分支所以我把区间写出来更有参考性。参数氟化液单相电子氟化液矿物油白油/变压器油基改性硅油苯基/烷基改性导热系数 W/(m·K)0.06 - 0.070.13 - 0.150.11 - 0.15比热容 kJ/(kg·K)1.0 - 1.11.6 - 2.11.4 - 1.7密度 g/cm³1.6 - 1.80.8 - 0.90.9 - 1.0运动粘度 cSt25℃0.7 - 55 - 305 - 50可调范围更大介电强度很好较好但易受水分影响好闪点多数无闪点140℃ - 200℃以上通常大于250℃单位体积带热能力相对低高中高材料兼容性对部分塑料/胶体有溶胀对橡胶、涂层、光纤涂覆层风险较大对硅橡胶类有溶胀风险价格量级每升数百至上千元几十元数百元长期运维压力挥发损失、补液贵脏污、氧化、需过滤较稳定温度窗口宽这张表的信息量很大我挑几个关键点展开说。2.2 氟化液低粘度高成本适合少量热、高洁净场景氟化液的传热逻辑和另外两种完全不同。它的导热系数在三种液体里垫底单位体积比热容也低但因为密度大、粘度极低同样功率的泵可以推动它做高速湍流靠流速把换热系数拉起来。低粘度还有一个好处能钻进光模块外壳散热齿的细缝隙里把齿根处的热界面带走。不过它的换热量是有上限的。低沸点牌号可以做两相浸没利用相变潜热把换热量做得极高而单相氟化液在高功率密度下的表现就比较吃流速如果流道设计不好光模块周围形成低速区热反而排不出去。氟化液最大的价值其实是材料兼容、电绝缘和洁净度。它本身化学惰性高对大多数金属、陶瓷、PCB基材都很友好挥发后不留残渣不会在透镜镀膜上留下油膜。代价是贵而且蒸汽压较高、有挥发损耗系统需要密封和补液。这决定了氟化液的天然适配段光模块功耗分布在8W到12W整柜热量密度可控又对光路洁净度要求高的场景。低功耗模块用氟化液用量没那么大成本压力小高功耗模块用氟化液要么上两相要么把流量和流道做到极致综合成本会直线上升。2.3 矿物油高比热高导热的大力士维护压力甩不掉矿物油的传热数据在三种液体里是最亮眼的导热系数是氟化液的两倍以上比热容也高这意味着在相同流量下矿物油从光模块表面带走的热量明显更多。20W级别的800G光模块矿物油只要流量跟得上模块壳温可以被压得相当漂亮。但矿物油的缺陷一样突出。首先是粘度大尤其低温下粘度会成倍增加。北方机房如果冬天停机后再启动冷却液温度降到10℃以下矿物油流动性直线下降光模块区域的流量如果不足局部温度会迅速走高。其次是干净度问题矿物油本身就是复杂烃类混合物长期高温运行会有氧化变质风险产生油泥和酸性物质。矿物油还会在光学透镜上形成油膜在光纤涂覆层和胶粘剂上产生溶胀或渗透这个问题我在后面专门讲它比高温还要致命。矿物油的性价比决定了它的战场是中功率、预算敏感、运维团队能扛得住定期维护的场景。坦白说在10W到25W这个区间矿物油是很多液冷厂商愿意尝试的方案因为它便宜、好买、传热好。前提是过滤系统、旁路加热系统、清洗维护计划都要提前设计进去缺一个光模块就会先遭殃。2.4 改性硅油温度窗口和化学惰性让它在高功率下更稳改性硅油是我个人在近几年项目里越来越看好的一个方向。它是在硅油基础上通过烷基、苯基改性来调整粘度和低温流动性继承硅油耐高温、化学稳定、不易氧化炭化的优点又克服了纯硅油低温下变稠、粘温性差的毛病。在传热方面改性硅油导热系数介于矿物油和氟化液之间比热容也比较可观单位体积带热能力属于中上水平。它的粘度可选择范围很宽低粘度的改性硅油在5cSt级别依然比矿物油更容易泵送高粘度的则适合需要挂壁润滑的场合。改性硅油真正的王牌是高温稳定性。光模块功耗到了25W以上壳体附近冷却液温度可能长期工作在65℃到80℃甚至更高。矿物油在这个温度下长时间运行氧化问题会加速暴露氟化液虽然耐温也可以但单相换热能力不够、成本太高。改性硅油可以在这个温度窗口长期稳定运行不会产生油泥也不容易在光学表面形成难以清除的残膜。所以改性硅油的适配段很清晰高功率、高密度、长期高温运行的光模块集群。成本居中运维省心化学风险比矿物油低一个台阶。它唯一的短板是材料兼容性对含硅橡胶的密封圈、部分硅胶保护胶有溶胀倾向选型时要把模块内部的胶种搞清楚。3. 功率等级匹配表10W以下、10-25W、25W以上的分界线3.1 直接给一张推荐关系表先出结论性质的表后面再讲理由。这张表是基于我在实际项目中的观察结合典型光模块封装和功耗做的推荐适合作为选型起点。光模块类型典型功耗范围推荐冷却液推荐理由100G QSFP28 / 400G QSFP-DD早期3.5W - 10W氟化液单相发热不大重点保光路洁净成本可控400G QSFP-DD / 800G QSFP-DD10W - 16W氟化液或矿物油氟化液保稳矿物油走量看预算和维护能力800G OSFP / 高功率QSFP-DD16W - 24W矿物油或改性硅油需要更大换热能力矿物油性价比高改性硅油更稳1.6T OSFP-XD / CPO外部光源模块25W - 35W改性硅油或两相氟化液热流密度极大需要高耐温、低维护的介质这张表只是一个骨架真正的分界线不是功耗刚好卡在哪个数字而是液体带热能力能不能满足模块壳温约束。3.2 10W以内氟化液为主的低功耗区兼容性优先10W以内这个区间光模块本身还没到风冷完全压不住的地步。之所以还要做浸没通常是为了实现整机柜统一液冷架构而不是因为单个模块热到不行。这个时候选氟化液是性价比最优的思路。原因很简单功耗低意味着不需要借助矿物油的高比热和高导热氟化液的低粘度足以带走热量而氟化液带来的高洁净度、低残留、强绝缘让光模块的光学链路和电路寿命更有保障。另外这个功率段对冷却液用量少氟化液单价高的缺点被摊薄了。实操中我有一个经验100G/400G混插的旧机房改造如果系统本来就是氟化液单相浸没光模块不用特地去换液冷专用型号只要做好模块气密性检查和透镜保护一般都能顺利运行。但要注意氟化液对某些塑料外壳、标签油墨、密封胶仍然有溶胀风险上机前做小样浸泡是必须的。3.3 10-25W矿物油的价值区间前提是管路和过滤跟上10W到25W这一段是当前800G光模块的主战场也是矿物油最有价值感的区间。以800G QSFP-DD为例典型功耗16W到20W。这个发热量如果只用氟化液单相冷却需要比较高的流速才能压住壳温如果用两相氟化液系统成本和密封要求又上去了。矿物油则靠高导热系数和高比热占尽便宜在相同流量下能带走更多热量性价比十分突出。但我要强调矿物油在这个功率段能不能用住三分看液体本身七分看系统配套。前面提到的低温冷启动、过滤、油膜残留问题任何一个没有预案光模块都会先出现光功率漂移。我见过一个测试平台800G模块泡在矿物油里开始两天数据很漂亮到第三天Rx光功率掉了1.2dB拆开一看透镜上蒙了一层油膜光纤插芯周围还有絮状析出物。这个场景不是矿物油能不能用的问题是系统没做过滤和维护的问题。在这个功率段如果选择矿物油我建议泵出口装不低于10μm的过滤精度有条件就上5μm系统加旁路加热或低粘度白油保证低温启动流量光模块区预留光学清洗接口方便定期维护。3.4 25W以上改性硅油和两相氟化液的选择题到了25W以上就是1.6T、CPO外部光源这类高功率光模块的领域矿物油开始力不从心。原因有三一是换热需求大油系统需要极高流量流道压力损失和泵功耗水涨船高二是模块附近油温高矿物油氧化变质的加速度会增加三是如果模块内部局部热点过高矿物油的对流换热系数很难再往上走。改性硅油在这个段位的优势就很明显。它的耐温上限高长时间运行不会炭化结垢粘度可选范围广能根据流道设计定制低粘度牌号来降低流动阻力。我之前在一个1.6T光模块的测试台架上把改性硅油系统流量控制在能维持模块壳温65℃以内连续跑了一个月透镜表面没有形成可见油膜光功率漂移控制在0.3dB以内这个表现让我后续的高功率项目都优先考虑它。两相氟化液则是武力值更高的选项靠沸腾潜热把换热量直接拉满特别适合局部热流密度已经到了单相介质怎么吹都压不住的极端场景。代价是系统必须密封蒸汽回收和冷凝回路都要做补液成本高运维复杂度也大。在光模块这个部件上除非功耗到了30W以上且对壳温要求极苛刻否则我不太建议一上来就上两相。3.5 一个容易忽略的陷阱只看模块功耗不看整柜热设计另外还要提一个我在不少选型文档里看到过的误区只看光模块的标称功耗然后拿一个每瓦需要多少流量的经验值去套冷却液选型。实际上同一个24W的800G光模块如果交换机面板气流组织很差、周边还有高功率交换芯片的余热倒灌壳温和透镜温度会比理论值高不少。反过来如果液冷流道设计得好光模块周围冷却液流速高24W的模块甚至可以用16W模块那套冷却液配置。所以功率等级只是参考坐标系真正的选型依据是模块壳温约束 冷却液在模块表面的实际对流换热能力。4. 光学污染浸没式液冷光模块最容易翻车的环节4.1 光模块里的材料看着简单其实处处是薄弱点很多做液冷的人对光模块的第一印象是一块PCB加一个金属壳泡进液体里应该没事。但真实的光模块内部比想象中复杂得多。从光模块原理图和耦合结构看一条完整链路是激光器发光经过透镜耦合进光纤光纤另一端出来再经过透镜耦合进探测器。中间可能还有隔离器、WDM滤光片、反射镜这些光学元件。激光器和探测器旁边的透镜表面都镀了增透膜滤光片是精密的介质膜层这些光学面的洁净度要求极高哪怕一层肉眼几乎看不见的油膜都会显著改变光的透过率和反射率。材料层面光模块外壳通常是锌合金或铝合金加镀镍处理内部有FR4 PCB、密封胶、光纤涂覆层和尾套。不同冷却液和这些材料的化学反应路径完全不同。氟化液容易对部分塑料和胶体产生溶胀矿物油对橡胶密封圈和光纤涂覆层有溶胀风险还可能让标签油墨褪色、脱落改性硅油对含硅橡胶的密封件有软化倾向。实际项目中我最担心的是导热界面材料、密封胶和结构件里的硅酮类物质。光模块里的胶水如果被矿物油或硅油溶胀轻则密封性能下降重则胶体析出颗粒物悬浮在冷却液中随着循环流直接糊到透镜上。4.2 单模、多模和BIDI光模块对污染的容忍度完全不同同样是光学污染问题不同类型的模块表现差异巨大这也是选型时要分别讨论的原因。单模光模块的模场直径约9μm光束在透镜处的汇聚光斑极小透镜表面哪怕沾上一个亚微米级的颗粒或一层薄油膜耦合效率都会明显下降链路损耗会增大几个dB。多模模块的纤芯直径有50μm甚至62.5μm对同样污染物的容忍度就高不少有时候光功率下降0.3dB到0.5dB都不容易察觉。BIDI光模块更特殊。BIDI是在一根光纤里同时收发光信号模块内部有WDM滤光片把不同波长分开。滤光片通常是倾斜45度放置的介质膜片对入射角度和表面状态极度敏感。如果冷却液在滤光片表面留下油膜光的反射和透射特性会改变可能导致收发光串扰增大、插损突增甚至直接出现误码。所以我的建议是在评估冷却液的时候不要只拿一个多模模块做浸泡测试就算完事必须把单模、多模、BIDI各拿一只同测。否则很容易得出这种冷却液完全没问题的错误结论——只是因为你测的那个模块对污染不敏感而已。4.3 用mlxlink -m/-c做浸泡前后的光路体检光学污染和温度异常不能靠眼睛看要靠数字诊断。在Mellanox网卡平台上mlxlink工具是我做浸没实验时最常用的体检手段。具体操作上先把光模块插在网卡端口用mlxlink -d mlx5_x -m读取模块实时状态。这个命令可以拿到光模块类型、制造商、序列号、当前温度和收发光功率以及偏置电流和告警阈值输出里能看到Tx Power、Rx Power、Temperature、Vcc这些关键字段。再配合mlxlink -d mlx5_x -c看线缆信息能读出线缆类型是光缆还是铜缆、线缆长度、连接器状态。我建议的测试节奏是浸泡前先在常温空气环境下记录一组基线包括模块温度、Tx/Rx光功率、偏置电流刚浸泡进水后1小时、4小时、24小时分别再记录观察是否有短时冲击之后每天固定时间记录一次至少要跑72小时每次同时记录冷却液温度和流速把变量控制在同一水平。诊断数据怎么看重点是两部分一是模块内部温度是否比同功耗风冷时明显下降这能验证冷却液带热能力二是Tx和Rx光功率是否出现明显漂移。光功率漂移如果在0.3dB以内属于正常波动超过0.5dB就要警觉超过1dB基本就是透镜污染或耦合变化需要停机检查。浸泡后如果模块温度正常但Rx光功率一直在缓慢下降而Tx功率没什么变化那大概率是接收端透镜或滤光片表面出了问题。命令本身很简单难的是把数据和时间、工况对应起来。我给自己的要求是每次记录时都拍下冷却液当前温度、流速设置、泵频率这样才能还原问题到底出在传热还是出在污染。另外要提醒一句不同网卡固件版本对mlxlink的支持有差异跑之前先mlxlink -h确认参数可用性不要在生产环境上临时摸索。5. 我的浸没实验步骤与三个容易忽略的运维细节5.1 先做浸泡台架实验别直接上机无论最终选哪种冷却液我都强烈建议先做一个几十到上百升规模的小台架实验而不是直接把整个机柜泡进去。台架实验可以帮助你在几周内拿到大量真实数据成本远低于整柜翻车后的清洗和返工。具体流程可以参考我这边用过的一套做法准备一个带循环泵、过滤器和加热棒的实验槽装入选定的冷却液放入至少三只光模块一只多模、一只单模、一只BIDI全部插上光纤并连接到测试端用可调负载或真实流量跑起来让光模块功耗尽量贴近目标工况按温度梯度测试先25℃常温跑24小时再逐步升到50℃、65℃每个温度点稳定8小时以上观察光功率和温度是否有突变最后做一次低温循环模拟机房停电后重新启动看冷却液低温粘稠会不会导致流量骤降实验结束后立即拆检模块重点看透镜表面、滤光片、密封胶和外壳镀层状态。这个流程看着繁琐但能一次把传热能力、材料兼容、低温启动、光学污染四个问题都覆盖掉。5.2 三个容易忽略的运维问题低温粘稠、过滤、补液和排气台架实验之后真正上线运行还要应对三个我踩过坑的运维问题。第一是低温粘稠。矿物油最明显温度降到10℃以下粘度可能翻倍泵如果没做变频补偿光模块区流量会不够模块壳温悄悄往上走。改性硅油也有这个问题只是程度轻一些。解决思路是加旁路加热管或者在停机策略里设定保持循环不关机实在要停机重启前先让冷却液循环自热到一定温度再加载业务。第二是过滤精度。矿物油系统里光模块附近最适合装高精度过滤器因为光模块对颗粒物尤其敏感。一个小颗粒堵在光纤端面或者卡在连接器里光功率可能瞬间掉好几个dB。过滤精度建议10μm起步有条件直接上5μm滤芯更换周期要根据实验数据定不能照搬供应商给的默认值。第三是补液和排气。氟化液体系挥发损耗明显需要自动补液装置矿物油和改性硅油挥发性低但管路接头、泵轴密封处会有微渗。系统里如果溶解了空气气泡流经高温光模块表面会加剧局部热阻波动所以高位膨胀罐和排气阀是标配不要省。5.3 分区与流道安排光模块区要不要跟CPU区共用回路最后一个运维层面的问题光模块区和CPU/交换芯片区到底共用一套冷却液回路还是分成独立支路我自己的倾向是预算允许的情况下光模块区尽量独立一个支路哪怕用同一个泵站缸体也建议单独做一套过滤和流量调节。原因是光模块对冷却液的洁净度要求高于CPU和交换芯片而交换芯片区更容易产生热量波动和颗粒物。如果共用一套回路不做分区CPU区搅起来的杂质会直接带到光模块表面透镜污染的风险会明显增大。如果机柜空间限制没法做完全独立回路至少要做到分区过滤和分区流量计。光模块支路流量要能单独调节因为交换机前面板的流道压力损失和主板区不一样一个泵带全程时很容易出现光模块区流量不足但CPU区流量过剩的情况。6. 我的选型思路和实际体会最后想说几句把前面的内容收拢一下我在实际项目里最终形成的选型逻辑是先确认光模块封装形态和真实功耗再定工作温度窗口然后评估运维团队能承受的维护等级最后才去看冷却液单价。如果让我给一个最简洁的方向我的建议是这样10W以内的400G及以下光模块优先氟化液图的是省心和光路干净10W到25W的800G场景矿物油的性价比确实诱人但前提是你敢把过滤和清洗计划做成制度25W以上的1.6T和CPO外部光源场景改性硅油的长期稳定性更值得依赖两相氟化液留给那种不用成本说话的极端项目。我个人踩过最深的坑是08年一个800G模块测试项目当时迷信矿物油的高导热数据直接上机跑业务结果第三天开始出现零星光功率告警排查了一整天才发现透镜油膜问题。后来重新做了台架实验才意识到光模块这种带精密光学器件的设备和CPU完全不是一个评判维度——传热好只是入门门票光学污染才是决定成败的关卡。所以如果你正在做浸没式液冷光模块的选型我真心建议一句别只看冷却液的规格书拿几只单模、多模、BIDI光模块去做一个月浸泡测试用mlxlink把光功率和温度基线记录下来你会比任何选型表都更清楚自己该用什么液体。这个预处理步骤是我目前能给出的性价比最高的经验。
