文档摘要

1.1 大模型时代的算力需求演进 为什么十年前的"卡皇"放今天连一个中型模型的预训练都跑不动？答案藏在 Scaling Law（缩放定律）里。 1.1.1 Scaling Law：算力需求爆炸的物理根源 大模型能力之所以随规模跃升，背后有一条经验规律：在数据、参数、算力三者同比例放大的区间内，损失函数会近似按幂律下降。这条规律被称为 Scaling Law。 会员。《1.1 大模型时代的算力需求演进》收录于灏天文库文集《AI 超级计算集群 · NVL72 与昇腾950 SuperPoD》，提供技术教程、实践指南与问题解决方案，支持在线阅读、全文检索与知识沉淀，助力开发者系统化学习。文档编号69182。

该文档为会员专享，请先登录或注册后再查看

登录 注册

---