趋势洞悉

AI服务器售后服务全解析-上篇:从零件到机柜的四层售后挑战

发布日期: 更新日期:

       AI 服务器的部署规模持续扩大,设备形态从零件与板卡,逐层堆叠为整机、机柜。IDC 在 2022 年的预测指出,约半数产品与资产已联网(49.6%),三年内预计升至 67.2%[2]。但数据要转化为有效的售后决策,前提是维修记录能跨层串联,而非各自停留在单层记录。

       业界常以 AMAX 提出的 Manufacturing Level(L1–L12)描述设备从零件到机柜的整合过程[1]。AI 服务器多采用液冷,其分级在风冷基础上加入冷板、快速接头与管路等液冷元件[6](图一):L1–L5 为机壳零件与次组装;L6 为主板装入机壳;L7–L9 依序加装扩展卡、存储设备、CPU 与内存;L10 为预装 OS、可开机运行的完整服务器,须通过漏液检测与系统测试;L11 为节点装入机柜、接上歧管并可通电;L12 为可直接进场部署的整柜。

液冷服务器制造分级(Manufacturing Level)[6]

图一:液冷服务器制造分级(Manufacturing Level)[6]

       从售后角度看,各层的故障形态、责任归属与维修逻辑不同,因而有不同的售后服务需求与解决方案。本文归纳为零件级(Component,L1–L5)、板卡级(L6,含 L7–L9 加装)、整机级(L10)与机柜级(L11)四种情境,最后介绍 wareconn 如何串联各层。

一、零件级(Component):分级处理与责任判定

       零件级以 L1–L5 的机壳、电源、排线与背板为基础,并延伸涵盖可独立更换的功能零件,如 GPU、内存、存储设备、网卡。维修流程为:来料检测→故障分析(FA)→维修或更换→出货测试。

       零件单价落差大、故障来源牵涉多方,售后服务需求主要有两项:

➤     低价零件:快速换新、管控备品

       低价零件以备品直接换新,不逐件分析;GPU、HBM(高带宽内存)等高价零件则走 RMA(退货授权)流程,退回后经 FA 判定,避免换错件或重复送修,推高备品库存成本。

➤     高价零件:坏在哪、责任在谁

       高价零件除了判定“坏在哪里”,还须回推故障属于客户端、制程端或供应商端,即 CID(客户致因)、PID(制程致因)、VID(供应商致因)。若与设计或制程有关,还须确认测试程序与架构是否更新,并以 ECN(工程变更通知)落实。

       针对这两项需求,高价件走标准化的 RMA 与 FA 流程,统一故障码对照,每笔故障判定归属 CID、PID 或 VID,并管控 ECN 与测试程序版本。前提是完整的追溯数据:序列号适合追踪高单价产品,批次统计适合比较大量产品[3]。

二、板卡级(L6,含 L7–L9 加装):维修能力与关联追踪

       L6 是整合过程的第一个转折点,主板装入机壳并开机测试,形成“裸机”。此后 L7–L9 陆续加装扩展卡、存储设备、CPU 与内存;液冷机型另装冷板与快速接头[6]。典型情境是裸机开机正常,加装 CPU 与内存后却无法开机:问题可能出在主板、某条内存,或两者的兼容性与 BIOS 版本。

       板卡级的售后服务需求取决于板卡单价:

➤     低价板卡:免费处理

       低价板卡的维修成本可能高于板卡本身,常见做法是免费换新或报废,视单价与合同而定。

➤     高价板卡:测试与维修能力

       每加装一项零件,组成就变动一次,异常来源难以一眼判定,因此高价板卡修复再用时,需要测试程序、维修技术与 FA 来定位;维修所需的低阶零件备品也要备足。

➤     零件 RTV 与维修记录

       板卡上的不良零件可退货至供应商(RTV),须附不良代码(Error Code)与报废证明,并留存维修记录以供追溯。

       实务上可依症状反推(如图二):先确认裸机是否正常,再逐一检视新加装的零件(液冷机型含冷板与接头)与 BIOS 版本,必要时换到另一台正常板卡交叉验证。这需要系统记录板卡与加装零件的组合关系与更换历程,也就是“关联性”,并管理维修记录与备品库存。

L6 加装后异常的排查流程示意

图二:L6 加装后异常的排查流程示意

三、整机级(L10):系统对接与复测验证

       L10 已是完整产品,硬件到位、OS 与软件完成整合。流程为:整机拆解→定位故障零件→更换→重新组装→开机与老化测试(Burn-in),重心由“换零件”转为“整机作业”。

       整机级的售后服务需求集中在系统衔接与维修后验证:

➤     客户系统:维修与保修信息要串得上

       整机多已纳入客户的资产与工单系统,维修与保修信息须对接,客户才能掌握设备状态。

➤     物流信息:收发货与维修进度要看得到

       整机往返客户与维修中心,收发货、运单与维修进度须实时对接。

➤     复测验证:修好不等于没问题

       更换内存可能因固件版本不符触发兼容性问题,老化不完整也可能让故障在客户端复发,因此维修后须以测试机台与测试程序验证。

       针对这些需求,可把换件后的复测流程标准化,并把对接做在系统层。Google Cloud 的 GPU 验证涵盖低阶诊断、DCGM(数据中心 GPU 管理工具)健康诊断、NCCL(集合通信库)通信测试与工作负载模拟[9],也有厂商规定节点未通过诊断与压力测试,就不纳入集群[10]。维修后的复测可借鉴(如图三),并将复测结果、固件版本与更换零件写回整机履历,同时以 API 对接客户系统与物流信息。

整机级维修后的复测流程示意[9][10]

图三:整机级维修后的复测流程示意[9][10]

四、机柜级(L11):最小化停机与备品管控

       L11 将多台节点装入机柜,完成网络布线与交换机整合,测试对象扩大为整个机柜。整机测试通过,不代表跨节点运行正常,联网、布线与固件版本一致性成为新变量。以 GB200 NVL72 为例,约 120 kW 的散热采用直接液冷,并使用盲插式液冷歧管与浮动式快速接头[7],HPE 规格书列有热插拔与热抽换的服务设计[8]。现场作业涵盖电源、液冷与网络(如图四)。

机柜级现场服务的作业范围示意[7][8]

图四:机柜级现场服务的作业范围示意[7][8]

       机柜级的售后服务需求集中在停机、退供应商与备品:

➤     现场服务:停机范围要缩到最小

       故障多半须在客户机房现场处理,涉及电源、液冷与网络整合;数据中心不能轻易停机,一个节点的维修可能牵动整个集群,重点由“怎么修”转为“怎么缩小停机范围”。

➤     RTV:客户直退供应商,单据要对得上

       部分客户会将故障件直接退回供应商(RTV),不经组装厂;须有清楚的故障记录与单据,责任与数量才对得上。

➤     备品与大数据分析:预先配置、持续积累

       备品须依机柜位置与 SLA(Service Level Agreement,服务水平协议)等级预先配置并掌握存量;积累的维修数据也要能支撑大数据分析,作为备品配置与改善决策的依据。

       现场流程:工程师到场→定位故障服务器→热抽换或整机置换→验证整体运行。解决方式是把派工与备品前置:依机柜位置与 SLA 等级派工,备品预先配置到现场,以热抽换缩小停机范围,并同步留存 RTV 单据与维修记录。这需要现场派工机制、SLA 时效管控、备品存量管控与大数据分析。

五、wareconn 如何串联零部件到机柜的全流程服务

       四层的系统能力环环相扣:零件追溯支撑板卡关联,组合记录构成整机履历,整机履历又是现场服务的依据,任一层断点,根因追溯就失去依据。wareconn 以“定义产品/部件”、“产品部件关联”与“多种保修类型”三项功能,让四个层级的保修记录留存于同一平台(图五)。

wareconn 产品、部件与保修记录的数据关系示意

图五:wareconn 产品、部件与保修记录的数据关系示意

➤     定义产品与部件:

       零件级、整机级与机柜级以“定义产品”建立,板卡级以“定义部件”建立,可单笔新增或下载模板批量上传。

四层级的保修类型组合

表一:四层级的保修类型组合

       机柜级部署于客户现场,故以交付装机(IBM)与派工服务(OSS)为主;板卡级另含退货至供应商(RTV)。

➤     系统需求与功能对应:

各层系统需求与 wareconn 功能对应

表二:各层系统需求与 wareconn 功能对应

       数据串通后,品牌厂商遇到客诉也能快速调出由零件到机柜的完整履历;这些结构化记录也是失效率与根因分析的基础,企业得以依“数据结构化→分析→改善→再观察”持续改善[5]。电子业表现最佳的企业,保修索赔处理约 5 天、保修成本约占营收 1.8%[4]。


结语

       从零件到机柜,售后问题随层级向外扩散:越往下越贴近零件与供应链,越往上越牵涉系统整合与现场服务。各层维修逻辑不同,却都得建立在可上下追溯的数据基础上。







作者

wareconn 编辑部

AI服务器售后服务全解析-上篇:从零件到机柜的四层售后挑战.pdf

参考资料

  1. AMAX, Manufacturing Level, AMAX Total Computing Solutions.
  2. Aly Pinder, 2022, Worldwide Manufacturing Product and Service Innovation 2023 Predictions, IDC FutureScape, IDC #US48627622.
  3. Wallace R. Blischke, M. Rezaul Karim, D. N. Prabhakar Murthy, 2011, Warranty Data Collection and Analysis, Springer.
  4. “Powering warranty reinvention: How electronics companies leverage new technologies to improve warranty management”, IBM Institute for Business Value, 2017.
  5. Albert Liao, 2022, Warranty Chain Management - Digitalization and Sustainability, Springer.
  6. Open Compute Project, Liquid Cooling Integration and Logistics White Paper, Revision 1.0 (CC BY-SA 4.0).
  7. NVIDIA, 2024, NVIDIA Contributes NVIDIA GB200 NVL72 Designs to Open Compute Project, NVIDIA Technical Blog.
  8. Hewlett Packard Enterprise, NVIDIA GB200 NVL72 by HPE QuickSpecs.
  9. Google Cloud, Proactive prevention: Inside Google Cloud's multi-layered GPU qualification process, Google Cloud Community.
  10. Crusoe, Burn-in validation, Crusoe Cloud Documentation.

相关文章