1. 程式人生 > >Redis內存分析工具—redis-rdb-tools

Redis內存分析工具—redis-rdb-tools

redis redis-rdb-tools

redis-rdb-tools是由Python寫的用來分析Redis的rdb快照文件用的工具,它可以把rdb快照文件生成json文件或者生成報表用來分析Redis的使用詳情、使用標準的diff工具比較兩個dump文件,總之是比較實用的工具,至於安裝可以通過Python的pip來安裝

[root@localhost ~]# yum -y install python-pip python-redis
[root@localhost ~]# pip install rdbtools

當然也可以通過git下載源碼來安裝,但是必須要安裝python-redis的插件,如下:

git clone https://github.com/sripathikrishnan/redis-rdb-tools
cd redis-rdb-tools
python setup.py install

在安裝後同glances類似調用名為rdb的Python腳本,而rdb常用的幾個參數:

  -h,--help    顯示此幫助信息並退出
  -c FILE, --command=FILE    要執行的命令,轉出的類型。有效的命令是json(轉成json),diff(差異比對),justkeys(僅有key),justkeyvals(僅有value),memory(內存報告), protocol(導成添加指令)
  -f FILE, --file=FILE    文件輸出文件
  -n DBS, --db=DBS    DBS數據庫號碼。可以提供多個數據庫。如果未指定,則將包括所有數據庫。
  -k KEYS, --key=KEYS 顯示出的Redis的key。這可以是一個正則表達式
  -o NOT_KEYS, --not-key=NOT_KEYS    顯示忽略的key。這可以是一個正則表達式
  -t TYPES, --type=TYPES    顯示出數據類型,key的數據類型string(字符串)、list(鏈表)、set(集合)、zset(sorted set --有序集合)和hash(哈希類型),如果沒有指定,全部數據類型將被返回
  -b BYTES, --bytes=BYTES    將內存輸出限制為大於或等於的key,單位字節
  -l LARGEST, --largest=LARGEST    將內存輸出限制為只有前N個key(按大小)
  -e ESCAPE, --escape=ESCAPE    將字符串轉義為編碼:raw(默認),print,utf8或base64。

如需要把匹配到的key的key和value用json的格式打印:

[root@localhost ~]# rdb --command json -k "test" /usr/local/redis/dump.rdb

此外最常用的就是把Redis的rdb內存分析報告生成csv文件,可以使用awk等相關工具分析,也可以導入數據庫用以分析:

[root@localhost redis]# rdb -c memory dump.rdb > memory.csv

在生成的報表中有database(key在Redis的db)、type(key類型)、key(key值)、size_in_bytes(key的內存大小)、encoding(value的存儲編碼形式)、num_elements(key中的value的個數)、len_largest_element(key中的value的長度),需要註意的如果導入數據庫一定要註意導入時所用字段數據類型,如導入MySQL中的建表ddl:

CREATE TABLE `memory` (
  `database` int(128) DEFAULT NULL,
  `type` varchar(128) DEFAULT NULL,
  `KEY` varchar(128) DEFAULT NULL,
  `size_in_bytes` bigint(20) DEFAULT NULL,
  `encoding` varchar(128) DEFAULT NULL,
  `num_elements` bigint(20) DEFAULT NULL,
  `len_largest_element` varchar(128) DEFAULT NULL,
  PRIMARY KEY (`KEY`)
);


Redis內存分析工具—redis-rdb-tools