原创 LSTM的加速算法:QRNN和SRU

LSTM介紹及加速原理 LSTM的公式可以表示如下所示,其中分別表示輸入門,輸出門,遺忘門。對LSTM還不熟悉的同學可以先閱讀:理解LSTM網絡或者直接閱讀Christopher Olah 的原博文:Understanding LSTM

原创 Git原理及學習

目前看到最好的介紹Git原理和相關操作的學習網站 http://iissnan.com/progit/html/zh/ch1_0.html

原创 GitHub Fork後代碼合併到原倉庫

GitHub Fork後代碼合併到原倉庫 本地配置原項目的倉庫地址 git remote add upstream <原倉庫github地址> 獲取原倉庫的更新 git fetch upstream 合併原倉庫的更新

原创 論文閱讀:神經網絡的有趣性質(Intriguing Properties Of Neural Network)

這篇文章提出對抗樣本(Adversarial example)這個坑。所謂對抗樣本,就是在原樣本上引入細微擾動,就能使得模型出現誤分類的情況,這也是對抗生成網絡的啓發思想深度學習自詡爲特徵學習的模型,但是這特徵由數據出發進行自主的學習,故