機器學習-吳恩達 p51 筆記

話不多說,先粘上幾個比較重要的圖

       這裏有個推導g'(z^{(3)})=a^{(3)}.*(1-a^{(3)})

       因爲

                                                                         g(z^{(3)})=a^{(3)}

                                                           g(z^{(3)})=\frac{1}{1+e^{-z^{(3)}}}=a^{(3)}

       那麼

                         g'(z^{(3)})=\frac{1+e^{-z^{(3)}}-1}{(1+e^{-z^{(3)}})^2}=\frac{1}{1+e^{-z^{(3)}}}*(1-\frac{1}{1+e^{-z^{(3)}}})=a^{(3)}.*(1-a^{(3)})

 

 

      個人覺得這份僞代碼的i容易給人造成歧義。其中的x^{(i)}y^{(i)}中的i表示第i組數據。而\Delta _{ij}^{(l)}中的i表示第l​​​​​​​層的第i行第j列的元素。

 

 

 

 

 

 

 

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章