Tcmalloc優化Mysql內存管理

實驗環境:

OS:Redhat 5.3 64bit

Mysql:mysql 5.5.29


TCMalloc(Thread-Caching Malloc)與標準glibc庫的malloc實現一樣的功能,但是TCMalloc在效率和速度效率都比標準malloc高很多。TCMalloc是 google-perftools工具中的一個(gperftools四個工具分別是:TCMalloc、heap-checker、heap- profiler和cpu-profiler),這個工具是開源的,以源碼形式發佈。如果覺得自己維護一個內存分配器麻煩的話,可以考慮將 TCMalloc靜態庫連接到你的程序中。使用的時候和glibc中的malloc調用方式一模一樣。你需要做的只是把TCMalloc的動態庫或者靜態 庫連接進你的程序中,你就可以獲得一個高效,快速,安全的內存分配器。

與標準的glibc庫的malloc相比,TCMalloc在內存的分配效率和速度要高,可以在高併發的情況下很好的控制內存的使用,提高服務器的性能,降低負載。TCMalloc的實現原理和測試報告請見一篇文章:TCMalloc:線程緩存的Malloc

一、安裝Tcmalloc

因爲測試環境都是爲Linux 64位操作系統,so需要先安裝libunwind庫,而對於32位操作系統來說是不需要的。libunwindku庫在64位的操作系統爲爲程序提供基本的堆棧輾轉開解功能,其中包括:用於輸出堆棧跟蹤的API、用於以編程方式輾轉開解堆棧的API、支持C++異常處理的API。

①、安裝libunwind

# wget http://download.savannah.gnu.org/releases/libunwind/libunwind-1.1.tar.gz    下載URL,可以進入這個URL下載最新的libunwind庫
# tar xzvf libunwind-1.1.tar.gz
# CFLAGS=-fPIC ./configure
# make CFLAGS=-fPIC
# make CFLAGS=-fPIC install

注意:這裏是使用默認配置安裝的,默認路徑爲/usr/local,so libunwind庫應該是安裝在/usr/local/lib目錄下

②、安裝Tcmalloc

# wget http://gperftools.googlecode.com/files/gperftools-2.1.tar.gz
# cd gperftools-2.1
# ./configure
# make && make install

注意:這裏也是使用默認配置安裝的,默認路徑爲/usr/local,且Tcmalloc庫也是是安裝在/usr/local/lib目錄下

安裝完成之後,建議TCmaloc庫加載到Linux系統中,具體操作如下:

# echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf
# /sbin/ldconfig

通過上面的幾個步驟,就已經將Tcmalloc給安裝完成了。那麼接下來就是怎麼使用Tcmalloc來優化Mysql啦。

二、使用tcmalloc優化Mysql

使用tcmalloc優化Mysql可以通過兩種方法來實現,分別爲:動態加載、靜態編譯

①、動態加載

動態加載比較方便,不需要重新安裝mysql,只需要修改在mysqld_safe添加一條語句然後重啓就行。具體操作如下:

# vim mysqld_safe
···
export LD_PRELOAD="/usr/local/lib/libtcmalloc.so"
···

注意:這裏必須在LD_PRELOAD前面加上export,否則不生效。

重啓之後我們可以通過如下命令來查看,mysql是否已經使用Tcmalloc來進行內存處理

# lsof |grep -i libtcmalloc.so
mysqld    13961     mysql  mem       REG              253,0  1948990     196421 /usr/local/lib/libtcmalloc.so.4.1.2

②、靜態編譯

這個方法需要重新安裝mysql數據庫,具體的編譯參數如下:

cmake -DCMAKE_INSTALL_PREFIX=/app/soft/mysql5.5.29 \
-DMYSQL_UNIX_ADDR=/data/mysqldata/mysql.sock \
-DDEFAULT_CHARSET=utf8 \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_EXTRA_CHARSETS=all \
-DWITH_MYISAM_STORAGE_ENGINE=1 \
-DWITH_INNOBASE_STORAGE_ENGINE=1 \
-DWITH_READLINE=1 \
-DENABLED_LOCAL_INFILE=1 \
-DMYSQL_DATADIR=/data/mysqldata \
-DCMAKE_EXE_LINKER_FLAGS="-ltcmalloc" \
-DMYSQL_TCP_PORT=3306

編譯完成,成功啓動之後,檢測是否使用tcmalloc的方法和動態加載一樣。


ok,以上就將mysql使用TCmalloc進行內存處理的安裝配置了,如有問題請指正。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章