目前幾乎所有的主流多媒體播放器都是基於開源多媒體框架ffmpeg來做的，可見ffmpeg的強大。下面是對一個媒體文件進行解碼的主要流程：
1. 解複用(Demux)
當我們打開一個多媒體文件之後，第一步就是解複用，稱之爲Demux。爲什麼需要這一步，這一步究竟是做什麼的？我們知道在一個多媒體文件中，既包括音頻也包括視頻，而且音頻和視頻都是分開進行壓縮的，因爲音頻和視頻的壓縮算法不一樣，既然壓縮算法不一樣，那麼肯定解碼也不一樣，所以需要對音頻和視頻分別進行解碼。雖然音頻和視頻是分開進行壓縮的，但是爲了傳輸過程的方便，將壓縮過的音頻和視頻捆綁在一起進行傳輸。所以我們解碼的第一步就是將這些綁在一起的音頻和視頻流分開來，也就是傳說中的解複用，所以一句話，解複用這一步就是將文件中捆綁在一起的音頻流和視頻流分開來以方便後面分別對它們進行解碼，下面是Demux之後的效果。
2. 解碼(Decode)
這一步不用多說，一個多媒體文件肯定是經過某種或幾種格式的壓縮的，也就是通常所說的視頻和音頻編碼，編碼是爲了減少數據量，否則的話對我們的存儲設備是一個挑戰，如果是流媒體的話對網絡帶寬也是一個幾乎不可能完成的任務。所以我們必須對媒體信息進行儘可能的壓縮。
3. FFmpeg中解碼流程對應的API函數
瞭解了上面的一個媒體文件從打開到解碼的流程，就可以很輕鬆的閱讀ffmpeg代碼，ffmpeg的框架也基本是按照這個流程來的，但不是每個流程對應一個API，下面這副圖是我分析ffmpeg並根據自己的理解得到的ffmpeg解碼流程對應的API，我想這幅圖應該對理解ffmpeg和編解碼有一些幫助。
Ffmpeg中Demux這一步是通過avformat_open_input（）這個api來做的，這個api讀出文件的頭部信息，並做demux，在此之後我們就可以讀取媒體文件中的音頻和視頻流，然後通過av_read_frame()從音頻和視頻流中讀取出基本數據流packet，然後將packet送到avcodec_decode_video2()和相對應的api進行解碼。
後續會對ffmpeg的代碼進行深入探討，本文只是鋪墊！
本文轉載於：http://blog.chinaunix.net/uid-26611383-id-3976154.html