原创 模型的優化與訓練 --- 梯度下降法及其衍生

梯度下降(Grandient Descent) 梯度下降的核心原理: 函數的梯度方向表示了函數值增長速度最快的方向,那麼和它相反的方向就可以看作是函數值減少速度最快的方向。對機器學習模型優化問題,當目標設定爲求解目標函數最小值時

原创 深度學習訓練中是否有必要使用L1獲得稀疏解

內容來自知乎深度學習訓練中是否有必要使用L1獲得稀疏解?,整理以做記錄。 知乎專欄:CNN-L1正則的稀疏性 -無痛的機器學習中對比了L1和L2在CNN中的實踐,並提出問題:稀疏解是否有意義?爲何在實際中很少看見L1在深度學習中採

原创 conda換回默認源

近期,國內conda鏡像皆停止服務,所以需要換回默認源,並掛vpn使用。 conda config --remove-key channels

原创 L1/L2範數

文中內容爲一下博文整理而來 https://blog.csdn.net/iterate7/article/details/75443504 https://blog.csdn.net/zhaomengszu/article/det

原创 MySQL數據庫基本操作

MySQL是一種關係型數據庫,另外一種數據庫爲非關係型數據庫,如:Mongodb,redis MySQL與Excel的不同 姓名 性別 年齡 班級 考試 語文 數學 英語 物理 化學 生物 高海 男 18 高三一班