經典卷積神經網絡：AlexNet（深度學習爆發的標誌）

參考網址：

https://blog.csdn.net/qq_24695385/article/details/80368618

 

LRN 局部響應歸一化：

參考：https://blog.csdn.net/shangyf_418/article/details/81145053

現在已經不再使用LRN，改用batch normal

仿照生物神經元的“側抑制”機制，創造臨近神經元的競爭機制，使得響應較大的神經元的值相對更大，提高模型的泛化能力。

後期爭議：在2015年 Very Deep Convolutional Networks for Large-Scale Image Recognition.提到LRN基本沒什麼用。