循环神经网络 (Recurrent Neural Network, RNN)

范叶亮 at 
循环神经网络 (Recurrent Neural Network, RNN)的配图
文章部分内容参考了 Christopher 的博客 Understanding LSTM Networks,内容翻译和图片重绘已得到原作者同意,重绘后的图片源文件请参见 这里。发展史循环神经网络 (Recurrent Neural Network, RNN) 一般是指时间递归神经网络而非结构递归神经网络 (Recursive Neural Network),其主要用于对序列数据进行建模。Salehinejad 等人 1 的一篇综述文章列举了 RNN 发展过程中的一些重大改进,如下表所示:Year1st AuthorContribution1990ElmanPopularized simple ……