优化方法

　　本文内容涉及梯度下降及其变形，牛顿法，共轭梯度法等多种优化方法，其中EM算法在本文中没有详细讲述。在后续文章中单独讲述。

　　

　　当然，优化方法还包括各种启发性方法 ，本文没有讲述。