第 6 章 · 体(一):机柜物理组成与供电设计 本章要回答的核心问题:前五章我们讲的都是"逻辑"——算力、带宽、互联拓扑。但当 72 颗 GPU 真的塞进一个机柜、要烧掉上百千瓦的电时,问题就变成了"物理"——电怎么进来、怎么分配、怎么保证不断电? 章节摘要 本章从逻辑世界回到物理世界。一个 NVL72 机柜的功率达到百千瓦级,昇腾集群单柜功率密度同样惊人。本章先讲机柜内部的物理布局——计算、交换、电源、风道如何分区;再剖析高密度供电架构,包括柜顶母线、后备电源(BBU)、多相供电与纹波控制;然后讨论功率密度对机房选址的硬性约束(PUE、单柜配电能力);最后落到供电可靠性与能效。读完本章,你将理解"为什么 AI 集群的机房和普通机房完全是两回事"。
本章要回答的核心问题:前五章我们讲的都是"逻辑"——算力、带宽、互联拓扑。但当 72 颗 GPU 真的塞进一个机柜、要烧掉上百千瓦的电时,问题就变成了"物理"——电怎么进来、怎么分配、怎么保证不断电?
本章从逻辑世界回到物理世界。一个 NVL72 机柜的功率达到百千瓦级,昇腾集群单柜功率密度同样惊人。本章先讲机柜内部的物理布局——计算、交换、电源、风道如何分区;再剖析高密度供电架构,包括柜顶母线、后备电源(BBU)、多相供电与纹波控制;然后讨论功率密度对机房选址的硬性约束(PUE、单柜配电能力);最后落到供电可靠性与能效。读完本章,你将理解"为什么 AI 集群的机房和普通机房完全是两回事"。
本章按"物理结构→供电视角→外部约束→可靠性能效"展开。第 6.1 节先看清机柜里到底装了什么、怎么排布;第 6.2 节钻进供电系统,看电怎么进柜、怎么分配到芯片;第 6.3 节把视角拉到机房,看功率密度对选址的反向约束;第 6.4 节收束到可靠性与能效。本章是第 7 章(液冷)的姊妹篇——供电和散热是机柜物理学的两位主角,必须合在一起理解。
6.1 机柜物理布局与器件分区(结构层) │ ▼ 6.2 高密度供电架构(供电层) │ ▼ 6.3 功率密度与机房配电约束(外部约束) │ ▼ 6.4 供电可靠性与能效(质量层)
下面这张 SVG 图展示一个 AI 集群机柜的典型物理分区,是理解本章的基础。
<svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 760 540" font-family="Segoe UI, Microsoft YaHei, sans-serif"> <rect width="760" height="540" fill="#0f172a" rx="12"/> <text x="380" y="34" text-anchor="middle" fill="#f8fafc" font-size="19" font-weight="bold">AI 集群机柜物理分区布局(示意)</text> <!-- 机柜外框 --> <rect x="120" y="60" width="320" height="440" rx="6" fill="#1e293b" stroke="#64748b" stroke-width="2"/> <!-- 柜顶:电源/管理 --> <rect x="130" y="70" width="300" height="50" rx="4" fill="#3f1d1d" stroke="#f87171"/> <text x="280" y="90" text-anchor="middle" fill="#e2e8f0" font-size="12" font-weight="bold">柜顶区:电源分配 / BBU / 管理</text> <text x="280" y="106" text-anchor="middle" fill="#94a3b8" font-size="10">后备电池、配电监控、机柜级管理</text> <!-- 计算节点区(多组) --> <rect x="130" y="128" width="300" height="58" rx="4" fill="#1e3a5f" stroke="#60a5fa"/> <text x="280" y="150" text-anchor="middle" fill="#e2e8f0" font-size="12" font-weight="bold">计算节点组 1(GPU/NPU + 内存)</text> <text x="280" y="168" text-anchor="middle" fill="#94a3b8" font-size="10">液冷冷板覆盖 · 高密度液冷供电</text> <rect x="130" y="192" width="300" height="58" rx="4" fill="#1e3a5f" stroke="#60a5fa"/> <text x="280" y="214" text-anchor="middle" fill="#e2e8f0" font-size="12" font-weight="bold">计算节点组 2(GPU/NPU + 内存)</text> <text x="280" y="232" text-anchor="middle" fill="#94a3b8" font-size="10">同上</text> <rect x="130" y="256" width="300" height="58" rx="4" fill="#1e3a5f" stroke="#60a5fa"/> <text x="280" y="278" text-anchor="middle" fill="#e2e8f0" font-size="12" font-weight="bold">计算节点组 ...(堆叠)</text> <text x="280" y="296" text-anchor="middle" fill="#94a3b8" font-size="10">每组数颗芯片,液冷贯穿</text> <!-- 交换区 --> <rect x="130" y="320" width="300" height="44" rx="4" fill="#334155" stroke="#fbbf24"/> <text x="280" y="340" text-anchor="middle" fill="#e2e8f0" font-size="12" font-weight="bold">交换区:NVSwitch / 交换芯片 / 铜背板接口</text> <text x="280" y="356" text-anchor="middle" fill="#94a3b8" font-size="10">机柜内全互联枢纽(详见第4章)</text> <!-- 液冷分水器 --> <rect x="130" y="370" width="300" height="44" rx="4" fill="#0f172a" stroke="#34d399"/> <text x="280" y="390" text-anchor="middle" fill="#e2e8f0" font-size="12" font-weight="bold">液冷 manifold(分水器)</text> <text x="280" y="406" text-anchor="middle" fill="#94a3b8" font-size="10">一次水进柜、二次水分配到各冷板</text> <!-- 电源底座 --> <rect x="130" y="420" width="300" height="70" rx="4" fill="#3f1d1d" stroke="#f87171"/> <text x="280" y="442" text-anchor="middle" fill="#e2e8f0" font-size="12" font-weight="bold">电源底座:PSU / 母线 / 接入</text> <text x="280" y="460" text-anchor="middle" fill="#94a3b8" font-size="10">多路电源模块、柜顶母线汇流</text> <text x="280" y="476" text-anchor="middle" fill="#94a3b8" font-size="10">接入机房配电(详见 6.3)</text> <!-- 右侧说明 --> <text x="600" y="78" text-anchor="middle" fill="#fbbf24" font-size="14" font-weight="bold">分区原则</text> <rect x="470" y="92" width="270" height="120" rx="8" fill="#1e293b" stroke="#475569"/> <text x="486" y="114" fill="#e2e8f0" font-size="12" font-weight="bold">① 计算区独立</text> <text x="486" y="132" fill="#94a3b8" font-size="11">GPU/NPU 集中分区,便于液冷贯穿</text> <text x="486" y="150" fill="#94a3b8" font-size="11">和供电集中配送</text> <text x="486" y="172" fill="#e2e8f0" font-size="12" font-weight="bold">② 交换区居中</text> <text x="486" y="190" fill="#94a3b8" font-size="11">NVSwitch/交换芯片靠近计算区</text> <text x="486" y="206" fill="#94a3b8" font-size="11">缩短高速互联走线</text> <rect x="470" y="220" width="270" height="120" rx="8" fill="#1e293b" stroke="#475569"/> <text x="486" y="242" fill="#e2e8f0" font-size="12" font-weight="bold">③ 电源上下夹击</text> <text x="486" y="260" fill="#94a3b8" font-size="11">柜顶电源分配 + 底座 PSU</text> <text x="486" y="278" fill="#e2e8f0" font-size="12" font-weight="bold">④ 液冷专属通道</text> <text x="486" y="296" fill="#94a3b8" font-size="11">manifold 独立分区,不与电气干扰</text> <text x="486" y="314" fill="#94a3b8" font-size="11">快速接头便于维护</text> <rect x="470" y="348" width="270" height="92" rx="8" fill="#3f1d1d" stroke="#f87171"/> <text x="486" y="370" fill="#e2e8f0" font-size="12" font-weight="bold">关键挑战</text> <text x="486" y="388" fill="#94a3b8" font-size="11">• 百千瓦级电流如何安全分配</text> <text x="486" y="406" fill="#94a3b8" font-size="11">• 重量:满柜可达吨级</text> <text x="486" y="424" fill="#94a3b8" font-size="11">• 可维护性:故障件如何抽出</text> </svg>
💡 如何读这张图:机柜从上到下分为柜顶(电源管理)、计算区(堆叠的计算节点组)、交换区(NVSwitch)、液冷分水器、电源底座。每一区的位置都不是随意的——计算区集中便于液冷和供电、交换区居中缩短高速走线、电源上下夹击保证配电均衡。理解这种"分区原则",就理解了 AI 机柜为什么不能像普通服务器那样随意堆叠。
本支柱页是第 6 章的入口,正式内容由四个子章节展开:
建议按 6.1 → 6.2 → 6.3 → 6.4 顺序阅读。本章讲"电",下一章第 7 章讲"热"——两者共同构成"体"。
本章关键词:机柜功率密度、供电设计、数据中心供电、BBU、PUE、物理分区 上一篇:第 5 章 下一篇:第 7 章 · 体(二):液冷散热系统