FFmpeg - RGB圖像編碼爲h264出現垂直翻轉/上下顛倒的問題

1 問題描述

在Unity中或者OpenGL中抓取的幀緩衝區數據（Unity爲Texture2D）即一張RGB圖片數據使用ffmpeg做.h264編碼後使用vlc播放出現了圖像垂直顛倒的問題，如下圖所示：

正常的圖片：

.h264編碼之後在vlc中播放出現了垂直翻轉的問題：

1.1 可能的原因

RGB圖像有兩種存儲方式：

• 一種是從上往下掃描
• 另一種是從下往上掃描。
  OpenCV爲從上往下掃描的方式，ffmpeg可能也是從上往下的存儲方式，而OpenGL/Unity中的幀緩衝數據可能是從下往上的掃描的方式，導致了圖像的垂直翻轉的問題。

從上掃描的圖像第一行的首地址即爲圖像Buffer的起始地址，而從下往上掃描的圖像第一行的首地址爲：buffer_data + linesize*(height-1)，其中buffer_data爲圖像Buffer的起始地址，linesize爲圖像的行字節寬度，對於RGB24圖像，linesize = （width * 3 + 3）/4×4，對於YUV420圖像，linesize = (width + 3)/4 *4。

2 解決方法

在sws_scale之前進行RGB數據的垂直翻轉，可使用以下函數：

///
/// @brief 垂直翻轉RGB數據
/// @param[in] width - RGB圖像寬度
/// @param[in] height - RGB圖像高度
/// @param[in] rgbData - RGB圖像數據指針
/// @param[in] bitsPerPixel - 每一個像素的字節大小，通常爲rgbData的長度/width*height
///

void h264Encoder::VerticalRotateRGBData(int width, int height, unsigned char* rgbData, int bitsPerPixel)
{
	unsigned char* tempRgbData = new unsigned char[width*bitsPerPixel];
	height--; 

	int index = (height + 1) / 2;

	for (int y = 0; y < index; y++)
	{
		memcpy(tempRgbData, &rgbData[y*width*bitsPerPixel], width*bitsPerPixel);
		memcpy(&rgbData[y*width*bitsPerPixel], &rgbData[(height - y)*width*bitsPerPixel], width*bitsPerPixel);
		memcpy(&rgbData[(height - y)*width*bitsPerPixel], tempRgbData, width*bitsPerPixel);
	}
	delete[] tempRgbData;
}

大家有興趣可以訪問我的個站：http://www.stubbornhuang.com