機器學習之模型評價與選擇（分類問題）

一、僞陽性和僞陰性

1. 僞陽性----I型錯誤，僞陰性---II型錯誤。

2. II型錯誤要比I型錯誤嚴重的多

二、混淆矩陣

In [ ]:

### y 預測        0       1

In [ ]:

### y實際 0      35     5

In [ ]:

###      1      10     50

5位I型錯誤（僞陽），10爲II型錯誤（僞陰）

準確率： （35+50）/100 = 85%

錯誤率： （5+10）/100 = 15%

三、混淆矩陣悖論（不能單靠混淆矩陣判斷）

四、累計準確曲線CAP curve

藍色：隨機曲線 、黑色：完美曲線（水晶球曲線）、紅色：較好模型的曲線

五、累計準確曲線分析CAP curve Ansy

六、項目地址

https://coding.net/u/RuoYun/p/Python-of-machine-learning/git/tree/master/00%E6%9C%BA%E5%99%A8%E5%AD%A6%E4%B9%A0/3.%E5%88%86%E7%B1%BB%E7%AE%97%E6%B3%95/6.%E6%A8%A1%E5%9E%8B%E9%80%89%E6%8B%A9%E4%B8%8E%E8%AF%84%E4%BB%B7?public=true