1.2 激活、损失、优化器:天平的三个砝码


文档摘要

1.2 激活、损失、优化器:天平的三个砝码 本节摘要:把三要素摆上同一张天平桌:激活函数管"表达力"、损失函数管"刻度与方向"、优化器管"步伐与速度"。本节用表格逐一称量每方的职责、它面临的张力,并让三者对齐到前向与反向的具体环节,建立起全书共用的观察框架。 上一节我们把优化拆成了三个问号。这一节不再停在抽象层面,而是给它们各自"领个工位",看这三样东西在前向、反向两条路上各站哪儿。 会员。《1.2 激活、损失、优化器:天平的三个砝码》收录于灏天文库文集《神经网络优化技巧:激活函数、损失函数、优化器选择》,原作者/来源:灏天文库,整理自「灏天文库」,提供技术教程、实践指南与问题解决方案,支持在线阅读、全文检索与知识沉淀,助力开发者系统化学习。本站整理收录,版权归原作者/开源协议所有。

该文档为会员专享,请先登录或注册后再查看


作者与出处
原作者: 灏天文库
来源:灏天文库
整理: 灏天文库整理
由灏天文库平台收录,内容或由平台用户上传,仅供学习交流
发布者: 作者: 灏天文库 转发
评论区 (0)
U