06.循环神经网络RNN

文档摘要

循环神经网络RNN 计算图 RNN 长短时记忆网络其他RNN RNN主要应用计算图计算图的引入是为了后面更方便的表示网络，计算图是描述计算结构的一种图，它的元素包括节点(node)和边(edge)，节点表示变量，可以是标量、矢量、张量等，而边表示的是某个操作，即函数。 6.1 下面这个计算图表示复合函数 6.2 关于计算图的求导，我们可以用链式法则表示，有下面两种情况。情况1 6.3 情况2 6.