原创 四參數擬合之LMF法(無約束)

文章目錄前言LM 算法Matlab代碼 前言  寫到這裏,已經發現了前面兩篇文章的重大bug。那就是牛頓法也好,LM法也好,都是針對無約束的問題,而四參數擬合問題是一個有約束的問題,參數一般設置爲0到正無窮。這也解釋了爲何之前的計

原创 四參數擬合算法之高斯牛頓法

文章目錄介紹牛頓法Matlab Code 介紹  前面提到了牛頓法,那其實相當於求根的算法。跟一般最小二乘法的區別是,它並沒有顯示的最小二乘目標式子。 F(A,B,C,D,xi)=0F(A,B,C,D,x_i) = 0F(A,B,

原创 四參數擬合算法之牛頓法

背景 : 因爲工作需要用C/C++實現四參數擬合算法,在網上搜了一圈,沒找到合適的現成代碼,就是現成其他語言的代碼,也沒有找到完整實現的,效果最好的要數L4P 的matlab代碼,可惜它最終調用的fit函數是matlab內置的,

原创 維納濾波及其簡單實現

文章目錄介紹基本概念簡單實現過程matlab實現結果小結 介紹 隨機信號包括了確定信號和隨機噪聲兩部分。維納濾波的本質是設計一組衝擊響應的函數,抑制信號中的隨機噪聲部分,或者說非預期信號部分,使得信號與預期值的均方誤差達到最小。

原创 Cardinal B-Splines 曲線擬合

文章目錄前言目標Cardinal B-SplinesCardinal B-Spline 曲線擬合基本原理代碼結果參考文獻 前言 前面介紹了spline的基函數,沒想到以前覺得很簡單的東西,能夠玩出這麼多花樣。我的初衷本不過是想

原创 通過teamviewer訪問內網

  teamviewer是內網穿透的利器, v#p#n屬於一對一的功能,無法實現訪問內網裏的其他機器。上網搜索了一下,查到兩篇已經實現的文章,具體設置就參考下面的第二個連接,非常詳細。   http://blog.csdn.net/bea

原创 四參數擬合之LM(有約束)

文章目錄前言目標變換matlab Code運算結果 前言 之前幾篇文章寫的都是四參數的無約束的優化方法,問題是,四參數本身是有約束的。這裏,通過變化法,將一個有約束的問題轉換爲無約束的問題,再使用LMF法求得最優解。 目標變換 原

原创 爲何QR分解收斂於特徵值

QR分解求特徵值的方法很簡單,計算過程如下:  QR本身可以看作一個將矩陣A轉化爲上三角矩陣R的過程,通過householder,givens轉換等手段,構造一系列的變換矩陣T,將矩陣轉換爲上三角矩陣R,而變換矩陣的逆矩陣則構成了Q。

原创 隱馬爾可夫模型與語音識別

文章目錄前言隱馬爾可夫(HMM)馬爾可夫鏈隱馬爾可夫HMM中的語音識別(孤立詞)HMM 語音識別過程GMM總結參考文獻 前言 隱馬爾科夫鏈結合語言識別,在細節上,涉及到的知識挺多,沒有一定的時間投入難以很好的去把握。這篇文章只想

原创 論文閱讀理解:Understanding Black-box Predictions via Influence Functions

文章目錄Cook DistanceInfluence Function參數影響Iup,params(z)\mathcal{I}_{up,params}(z)Iup,params​(z)損失影響Iup,loss(z,ztest)\m

原创 魯棒最小二乘法的三種優化形式(CVX)

文章目錄數據初始部分(a) robust least-squares problem(b)least-squares problem with variable weights(c)quadratic program參考 魯棒最小

原创 PLS1和lanczos的聯繫

經典的NIPALS流程如下 for a=1:A,a=1: A, \quada=1:A, (A-the number of components to be extracted) va=Xa−1ty\mathbf{v}_{a}=\

原创 異常檢測 cook distance

前面寫了leverage 槓桿的計算以及其意義 主要是爲後面的內容做一些鋪墊.Cook’s distance起源於提出這個名詞的統計學家Cook,用於刪除一個樣本後,對模型的影響。 假設有如下模型 y=Xβ+ϵ,X∈Rm×p {\

原创 異常檢測:Leverage of observation

Leverage槓桿是一個指標,描述了樣本對模型的影響程度 高槓杆點本質是一種離羣點,但是它不同於普通離羣點,和擬合直線比較遠,而是離開羣體遠,卻在擬合直線附近。爲了,擬合得更好,擬合直線需要靠近這點以減少擬合誤差。這樣導致了直線

原创 徒手下載谷歌圖書(google books)

以前有一個google books downloader程序,據說好用,到我用時已經用不了,看到一本好書,能看卻下不了,難免有一些失望。自己搗鼓了半天,用了一個比較傻的辦法把書本給下載了。網上看到有很多人在找這個解決辦法,把過程稍