ATRIMUT 标志
ATRIMUT 精准技术,可靠成果
技术文章

服务器预防性维护:为什么比故障抢修更经济

优质IT服务不只体现在故障发生后恢复得多快。 更基础的工作,是按计划维护设备,并持续保持技术文档准确, 让一部分事故根本不必发生。

服务工程师使用防静电清洁设备清理机柜内服务器的灰尘

在多年服务业务工作中,我参与的项目累计处理过数千万起事件。 经历越多,我越认同一个朴素的判断: 优质IT服务并不始于组织一支反应迅速的抢修队, 而是始于定期维护,以及持续保持准确的技术文档。

这听起来不够精彩。半夜赶到现场、恢复服务的团队看起来像英雄; 按计划清洁设备、检查冷却系统、更新连接图的工程师却很少受到同样关注。 但后者的工作,正是为了减少前者不得不出动的次数。

故障事件从哪里来

在我所参与项目的经验中,反复出现两类问题:

  • 约40%的事件与未实施或未及时实施计划性技术维护有关;
  • 约10%与技术文档缺失或过时有关。

这是作者对自身项目实践的概括,不是针对整个IT行业的随机抽样统计, 也不是对任何客户都能实现“故障减半”的承诺。 它表达的是:相当一部分问题,可以在变成事故之前处理。

行业研究同样强调流程的重要性。 Uptime Institute在2025年年度故障分析的公开说明中指出: 在与人为错误有关的重大故障中, 85%涉及人员未遵循程序,或程序本身存在缺陷。 这个分母不是全部数据中心故障。 参见Uptime Institute,2025年。

俄文原文引用的二次报道还列出若干不同原因比例。 中文版本采用上述范围明确的一手表述, 不把不同类别的百分比相加,也不将作者项目经验与行业调查混为同一组数据。

分开呈现作者项目经验与Uptime Institute行业观察:约40%涉及维护问题、约10%涉及文档问题;85%仅针对与人为错误有关的重大故障
图1. 两种不同来源的观察。左侧为作者项目经验,右侧为Uptime Institute公开说明。 统计对象和口径不同,不能相加,也不能直接比较。 中文版本据此重新绘制,不沿用俄文比例图。

灰尘:可以提前处理的风险

灰尘是一个很直观的例子。 它会积聚在风扇、散热器和电源等部位,影响气流与散热。 俄文原文援引了 Servermall关于设备清洁的文章, 其中提到特定条件下电子部件工作温度增加16.5 °C的资料。 这个数字不能理解为所有服务器积尘后都会出现同样的温升。

同样,也不应把某一个室温值当成所有服务器通用的故障界限。 进风温度、处理器温度和其他部件温度是不同指标, 允许范围还取决于具体机型、配置、海拔与厂商规定。 例如,Dell PowerEdge R740技术规格 对标准工作温度给出了具体条件。 现场维护应以对应设备手册、告警和趋势数据为依据, 而不是简单认定“超过30 °C或35 °C就必然故障”。

比较两种工作方式。

第一种:在约定的维护窗口内,工程师按计划检查设备, 使用适合电子设备的防静电清洁工具,并遵循厂商的断电、拆装与维护要求, 检查风扇和日志,记录处理结果。 这是可以提前安排的工作。

第二种:设备多年缺少维护,出现过热等问题后才开始处理。 此时可能同时需要更换部件、恢复服务与数据,并承担业务中断的损失。 并不是每次积尘都会导致整机报废,但拖延会减少可控处理的机会。

俄文原文引用 “Киберпротект”关于俄罗斯中小企业IT停机成本的文章, 以约200万卢布说明关键停机可能带来的损失量级。 这是该第三方材料中的俄罗斯市场估计, 不是ATRIMUT的统一测算,也不适用于所有企业或中国市场。

对具体客户,最有价值的不是套用平均数, 而是计算自己的停机损失与预防成本。

缺少文档时,工程师就像在排雷

文档问题不如灰尘直观,但后果可能更严重。下面是原文中的两个实际案例。

案例一:存储区域网络SAN

一台服务器失去了与存储区域网络(SAN)的连接, 最初只影响辅助基础设施。 工程师到场后,却没有连接图,或者拿到的是三年前的版本。 交换机端口究竟连接到哪里,已经不清楚。

如果此时靠猜测切换SAN交换机上的链路, 就可能把单台服务器的访问问题扩大到生产环境。 原文所述案例最终影响了整个生产系统: 一个局部事件变成了范围更大的事故。

案例二:刀片服务器机箱

任务原本只是更换机箱中的一台刀片服务器。 但现场缺少配置和兼容型号文档, 工程师凭外观判断选择了一块“似乎合适”的刀片并插入槽位。

原文所述结果是两块刀片和机箱背板受损, 承载的服务停止运行。 本应更换一个部件,最后却变成机箱维修和业务停机。 这是案例描述,不代表所有不兼容刀片插入后都会出现同一种损坏机制。

为什么维护与文档容易被当成无用开支

预防工作有一个难以展示的特点: 做得有效时,结果往往是“什么也没发生”。 服务器没有损坏,没有事故,也没有人半夜赶往现场。 客户看到“已完成维护、已更新文档”的报告,可能会问:究竟花钱买到了什么?

已经发生的事故,损失很容易看见; 没有发生的事故,其价值却不容易被看见。

客户购买的不是几份纸面文件,而是一套降低风险的工作机制:

  • 减少可预防的事件;作者的项目经验说明这一部分可能相当可观,但不是统一保证;
  • 让工程师知道设备在哪里、如何连接、应该怎样处理,从而减少排查时间;
  • 降低小问题因错误操作而扩大为事故的风险;
  • 支持设备长期使用,并帮助合理安排更换计划。

如何评估预防工作的价值

把讨论从“维护到底有没有用”转成可核对的项目比较,会更有帮助:

比较项目计划性维护事故后处理
发生时间提前约定的维护窗口可能在夜间、业务高峰或其他不便时段
人员工作可计划的工程师工时紧急到场、抢修和恢复工作
设备支出按状态与厂商要求维护或更换耗材、风扇等部件可能涉及服务器、刀片或机箱等部件更换
业务中断可以提前协调,部分任务仍需停机范围和持续时间往往更难预测
客户与合同影响提前沟通、安排变更与验证可能出现投诉、交付延误或约定的SLA责任

可以把年度维护成本,与可能避免的事故损失比较。 事故损失应包括人员恢复工时、设备、业务停机、数据恢复和适用的合同责任, 并避免对同一损失重复计算。 如果维护确实避免了一次重大事件,收益可能明显高于维护费用; 但需要结合事件概率和企业实际情况,而不是承诺固定回报倍数。

维护与技术文档至少应包含什么

我建议在服务合同与工作计划中明确以下内容:

  1. 按环境、厂商要求和监控结果安排清洁与冷却检查。 原文作者以普通机房约每半年一次作为起点; 粉尘较多或生产现场可能需要每1–3个月检查、维护。 具体频率应由现场情况确定,不是所有设备统一的强制周期。
  2. 检查风扇、电源、磁盘和RAID状态,分析硬件日志。
  3. 检查UPS和电池状态,并按相应维护要求实施测试。
  4. 保持LAN、SAN和供电连接图准确,标明线缆与端口。
  5. 维护设备清单、配置记录与兼容部件列表。
  6. 为更换刀片、磁盘、电源等典型任务准备可执行步骤, 包括必要的审批、停机条件、验证和回退安排。
  7. 每次变更后及时更新文档,而不是留到“有空再说”。

此外,文档本身应按敏感程度管理: 拓扑、配置和访问资料不是供所有人公开下载的材料。 需要让执行任务的人员获得受控访问,而不是把内部信息发布到公共网站。

结语

反应迅速的抢修团队很重要,但它是最后一道防线,不应是第一道。 可靠服务建立在定期维护和准确文档上: 尽可能提前消除风险,并让剩余事件更容易定位、处理和恢复。

对于中国同行与合作伙伴,本文介绍的是ATRIMUT在俄罗斯开展IT运维时的工作思路。 关于我们的相关工作,可参阅IT服务页面。 这里讨论的是工程与管理实践,不是对所有设备、所有故障作出同一种效果承诺。

常见问题

本文所说的计划性技术维护包括什么?

包括按计划清洁设备、检查冷却和供电、检查磁盘与RAID状态、分析日志,以及及时更新配置和连接文档。具体工作应按设备手册、风险与维护窗口安排。

服务器多久需要清洁一次?

原文作者以普通机房约每半年一次作为起点,粉尘较多或生产现场可能需要每1–3个月检查、维护。这不是所有设备的统一周期,应结合厂商要求、环境和温度趋势确定。

有多少IT事件与维护或文档问题有关?

作者在自身项目实践中概括为约40%与维护不及时或缺失有关,约10%与文档问题有关,不能把它当作整个行业的统一比例。Uptime Institute公开说明中的85%,则专指与人为错误有关的重大故障中涉及程序未被遵循或程序存在缺陷的情况,分母不同。

工程师已经熟悉系统,为什么仍要维护文档?

人员会变化,设备与连接也会持续调整。准确的拓扑、配置、兼容列表和操作步骤,可以减少猜测和误操作,并降低局部问题扩大为事故的风险。

  • IT服务
  • 预防性维护
  • 技术文档
  • 服务器
  • 业务连续性
Andrey Gromov,ATRIMUT联合创始人、技术总监
作者

ATRIMUT 联合创始人、技术总监

拥有16年IT行业经验。专业领域包括增材制造、服务基础设施、 俄罗斯联邦层面项目管理及公共部门项目。

技术交流、专家文章与合作咨询: cn@a3imut.ru

任何使用或复制本站内容的行为,仅在注明作者并附有指向原始网站 cn.a3imut.ru 的直接有效链接的条件下方可进行。