Redis內存分析工具—redis-rdb-tools

redis-rdb-tools是由Python寫的用來分析Redis的rdb快照文件用的工具,它可以把rdb快照文件生成json文件或者生成報表用來分析Redis的使用詳情、使用標準的diff工具比較兩個dump文件,總之是比較實用的工具,至於安裝可以通過Python的pip來安裝

[root@localhost ~]# apt-get install python-pip python-redis
[root@localhost ~]# pip install rdbtools

當然也可以通過git下載源碼來安裝,但是必須要安裝python-redis的插件,如下:

git clone https://github.com/sripathikrishnan/redis-rdb-tools

cd redis-rdb-tools
python setup.py install

同事建議安裝`python-lzf`,加快導出csv的速度。

如果報`error: command 'x86_64-linux-gnu-gcc' failed with exit status 1`的錯誤,那可以安裝

sudo apt-get build-dep python-lxml

在安裝後同glances類似調用名爲rdb的Python腳本,而rdb常用的幾個參數:

-h,--help 顯示此幫助信息並退出
-c FILE, --command=FILE 要執行的命令,轉出的類型。有效的命令是json(轉成json),diff(差異比對),justkeys(僅有key),justkeyvals(僅有value),memory(內存報告), protocol(導成添加指令)
-f FILE, --file=FILE 文件輸出文件
-n DBS, --db=DBS DBS數據庫號碼。可以提供多個數據庫。如果未指定,則將包括所有數據庫。
-k KEYS, --key=KEYS 顯示出的Redis的key。這可以是一個正則表達式
-o NOT_KEYS, --not-key=NOT_KEYS 顯示忽略的key。這可以是一個正則表達式
-t TYPES, --type=TYPES 顯示出數據類型,key的數據類型string(字符串)、list(鏈表)、set(集合)、zset(sorted set --有序集合)和hash(哈希類型),如果沒有指定,全部數據類型將被返回
-b BYTES, --bytes=BYTES 將內存輸出限制爲大於或等於的key,單位字節
-l LARGEST, --largest=LARGEST 將內存輸出限制爲只有前N個key(按大小)
-e ESCAPE, --escape=ESCAPE 將字符串轉義爲編碼:raw(默認),print,utf8或base64。
如需要把匹配到的key的key和value用json的格式打印:

[root@localhost ~]# rdb --command json -k "test" /usr/local/redis/dump.rdb

此外最常用的就是把Redis的rdb內存分析報告生成csv文件,可以使用awk等相關工具分析,也可以導入數據庫用以分析:

[root@localhost redis]# rdb -c memory dump.rdb > memory.csv

在生成的報表中有database(key在Redis的db)、type(key類型)、key(key值)、size_in_bytes(key的內存大小)、encoding(value的存儲編碼形式)、num_elements(key中的value的個數)、len_largest_element(key中的value的長度),需要注意的如果導入數據庫一定要注意導入時所用字段數據類型,如導入MySQL中的建表ddl:

CREATE TABLE `memory` (
  `database` int(128) DEFAULT NULL,
  `type` varchar(128) DEFAULT NULL,
  `KEY` varchar(128),
  `size_in_bytes` bigint(20) DEFAULT NULL,
  `encoding` varchar(128) DEFAULT NULL,
  `num_elements` bigint(20) DEFAULT NULL,
  `len_largest_element` varchar(128) DEFAULT NULL,
  PRIMARY KEY (`KEY`)
);

CSV文件:結果如下:

Redis內存分析工具—redis-rdb-tools

這樣就能看出大Key值了。

轉載自:
1.http://blog.51cto.com/jim123/2056153
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章