原创 RNN & LSTM

RNN所有的RNN均具有一種重複神經網絡模塊的鏈式形式,在標準的RNN中,通常重複模塊是一個非常簡單的結構,eg:只含有一個tanh層。標準RNN中的重複模塊一般結構較單一LSTMLSTM同樣是重複鏈式結構,但是模塊內部擁有不同的結構。LS

原创 梯度下降法(BGD & SGD & Mini-batch SGD)

梯度下降法(Gradient Descent)優化思想:用當前位置的負梯度方向作爲搜索方向,亦即爲當前位置下降最快的方向,也稱“最速下降法”。越接近目標值時,步長越小,下降越慢。如下圖所示,梯度下降不一定能找到全局最優解,可能尋找到的是局部

原创 近幾年Facial Expression Recognition相關文章

2018 年 CVPR (1)Facial Expression Recognition by De-expression Residue Learning (2)Joint Pose and Expression Modeling for

原创 CVRP 2017|DLP-CNN & center loss & Island loss

面部表情識別很大程度上依賴於定義好的數據集,然而這樣的數據集往往存在着很多的限制。現有的面部表情數據集往往在嚴格控制的實驗條件下,受試者和測試環境均不具有多樣性。受試者被要求按照統一的方式表達感情。以及大多數情感識別數據集只包含6種基本表情

原创 CVPR 2018|Best paper: Taskonomy 學習筆記

利用視覺任務之間的關聯性避免重複學習,冗餘數據的收集和計算。Taskonomy通過量化不同視覺任務之間的關聯、並利用這些關聯最優化學習策略。(如果兩視覺任務A,B之間具有關聯性,那麼我們在A中學習到的表達理應可以爲解決任務B 提供有效的統計