原创 學習python:決策樹算法

決策樹簡單算法思想: 構造決策樹,它主要是屬性的選擇,來選擇將元組最好的劃分成不同的類的屬性。 關鍵: 在於分裂屬性。所謂分列屬性就是在某個節點處按照某一個特徵屬性的不同劃分構造不同的分支,其目標是讓各個分裂子集儘可能的“純”。儘可能的純

原创 學習Python:邏輯迴歸算法

1. 邏輯迴歸簡單算法思想 2. 邏輯迴歸Python算法 @機器學習實戰 #加載二維數據 import numpy as np def loadDataSet(): dataMat =[]; labelMat=[]

原创 <數值分析>學習筆記

說明:數值分析要考試了,把一些東西總結一下,留着以後看看,也加深理解一下。 1:直接求解:Gauss消去法,LU分解 2:迭代求解:jacobi,Gauss-Seidel ,超鬆弛法,共軛梯度法 3:特徵值求解:冪法和反冪法

原创 稀疏問題的學習2

補充:對於矩陣恢復問題上述應用 ,那麼爲什麼可以核範數近似等於矩陣的秩,1範數近似等於0範數呢,文章中給出的解釋是A的核範數是rank(A)的最優凸近似,1範數是0範數的最優凸近似。所以上述問題就轉爲凸優化問題。從而更容易求解問題。

原创 矩陣填充的SVT算法

本文是對SVT的一篇文章的理解,即奇異值閾值算法的理解。 1:算法解決的問題如下: 其中最小化的是核範數(表示矩陣奇異值之和),是rank(X)的最優凸近似。 具體研究解決的是矩陣填充問題,如何在不完備的數據下把缺少的數據給補