5.2 NVL72 的机柜间扩展


文档摘要

5.2 NVL72 的机柜间扩展 一个 NVL72 机柜已经是"一颗大 GPU",但要训练万亿参数模型,往往需要几十甚至上百个机柜。怎么把这些"大 GPU"高效连起来?NVIDIA 的答案是 fat tree 组网 + 轨道优化。 5.2.1 从单柜到多柜:两纤网络的必然 回顾第 4.4 节,机柜内的 NVSwitch 铜背板无法跨柜延伸——铜的传输距离有限,无阻塞全互联被物理上限制在一个机柜内。 会员。《5.2 NVL72 的机柜间扩展》收录于灏天文库文集《AI 超级计算集群 · NVL72 与昇腾950 SuperPoD》,原作者/来源:灏天文库,整理自「灏天文库」,提供技术教程、实践指南与问题解决方案,支持在线阅读、全文检索与知识沉淀,助力开发者系统化学习。本站整理收录,版权归原作者/开源协议所有。

该文档为会员专享,请先登录或注册后再查看


作者与出处
原作者: 灏天文库
来源:灏天文库
整理: 灏天文库整理
由灏天文库平台收录,内容或由平台用户上传,仅供学习交流
发布者: 作者: 灏天文库 转发
评论区 (0)
U