感知視頻編碼---自由能引導的率失真優化

自由能—free-energy principle
The freeenergy principle suggests that the human visual system (HVS)
can actively predict “orderly” information and avoid “disorderly”
information for image perception. Basically, “orderly” is associated
with the skeletons and edges of objects, and “disorderly”
mostly concerns textures in images. Based on this principle, an
image is separated into orderly and disorderly regions, and
processed differently in image quality assessment (IQA).
大致意思:自由能理論指出,人眼對有序的信息更容易接受和關注到,而對無須的信息則比較排斥,不感興趣。而圖像的有序和無序可以通過他們的邊緣,紋理,結構等信息來表示。通過這些信息的提取,可以將圖像分割成有序區域和無序區域。在圖像質量評估的時候可以區別對待。

這個Free-energy principle的理論其實可以簡單概述成,人眼對紋理複雜區域不敏感,對紋理簡單區域敏感。同時,在結構信息比較重要的圖像中,需要將結構信息另外提取出來。充分提升視頻編碼的感知性能,重點在於如何有效的提取出感知信息,並將這些感知信息合理的應用到編碼過程中去。

參考文獻:Free-energy Principle Inspired Video Quality Metric and Its Use in Video Coding

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章