小白一枚,補充一下隱函數的知識,如有錯誤,歡迎大家交流指出。
GMM之隱變量
在GMM中,我們會用到隱變量這個概念,那麼隱變量到底是什麼?它的作用是什麼呢,接下來我們具體分析。
1. 爲什麼要引入隱變量Z?
如圖所示,這是一個二維的高斯混合模型,圖上爲很多的樣本,我們以紅色的樣本爲例。我們想知道紅色的樣本屬於哪一個高斯分佈(C1還是C2),事實上,這個紅色樣本是既屬於C1也屬於C2的,只不過屬於C1的概率更大,從圖中就可以看出,紅色樣本是距離C1近的。如果我們每個樣本都用C1,C2來表示,這樣是不方便的,因此我們引入了隱變量Z,用Z來表示樣本屬於哪個高斯分佈。
2. 什麼是隱變量Z?
隱變量是一個輔助變量,表示的是樣本x屬於哪一個高斯分佈。
隱變量是一個離散的隨機變量。
3.引入隱變量的要求
- 引入隱變量是爲了使問題求解起來更簡單
- 引入隱變量,要確保觀測數據的邊緣概率保持不變