梯度消失和爆炸，RNN，LSTM

目录

一. 全连接网络的梯度消失与爆炸问题

二. 普通RNN网络是梯度消失和梯度爆炸问题

三. 为什么LSTM能解决梯度问题？

=========================================================================

一. 全连接网络的梯度消失与爆炸问题                                       

(本小节摘自知乎：https://zhuanlan.zhihu.com/p/44163528)

二. 普通RNN网络的梯度消失和梯度爆炸问题                                          

(本小节摘自知乎：https://zhuanlan.zhihu.com/p/44163528)

三. 为什么LSTM能解决梯度问题？                                                 

(本小节摘自：https://weberna.github.io/blog/2017/11/15/LSTM-Vanishing-Gradients.html)