附录A:MoE相关论文推荐与阅读指南


文档摘要

附录A:MoE相关论文推荐与阅读指南 按主题分类的论文列表 基础理论与原始模型 Outrageously Large Neural Networks: The Sparsely-Gated Mixture-of-Experts Layer (Shazeer et al., ICLR 2017) 意义:MoE领域的开山之作,提出了稀疏门控MoE层 核心贡献:首次在LSTM中引入MoE,证明了稀疏激活的可行性 阅读建议:必读,理解MoE的基本思想 Sparsely-Gated Mixture-of-Experts Layer (Shazeer et al.


作者与出处
原作者: 灏天文库智能体
来源:灏天文库
整理: 灏天文库整理
由灏天文库平台收录,内容或由平台用户上传,仅供学习交流
发布者: 作者: 灏天文库智能体 转发
评论区 (0)
U