Redis内存分析工具—redis-rdb-tools

454次阅读

共计 2775 个字符，预计需要花费 7 分钟才能阅读完成。

redis-rdb-tools 是由 Python 写的用来分析 Redis 的 rdb 快照文件用的工具，它可以把 rdb 快照文件生成 json 文件或者生成报表用来分析 Redis 的使用详情、使用标准的 diff 工具比较两个 dump 文件，总之是比较实用的工具，至于安装可以通过 Python 的 pip 来安装

[root@localhost ~]# yum -y install python-pip python-redis
[root@localhost ~]# pip install rdbtools

当然也可以通过 git 下载源码来安装，但是必须要安装 python-redis 的插件，如下：

git clone https://github.com/sripathikrishnan/redis-rdb-tools
cd redis-rdb-tools
python setup.py install

在安装后同 glances 类似调用名为 rdb 的 Python 脚本，而 rdb 常用的几个参数：

  -h，--help    显示此帮助信息并退出
  -c FILE, --command=FILE    要执行的命令，转出的类型。有效的命令是 json(转成 json)，diff（差异比对），justkeys（仅有 key），justkeyvals（仅有 value），memory（内存报告），protocol（导成添加指令）
  -f FILE, --file=FILE    文件输出文件
  -n DBS, --db=DBS    DBS 数据库号码。可以提供多个数据库。如果未指定，则将包括所有数据库。
  -k KEYS, --key=KEYS 显示出的 Redis 的 key。这可以是一个正则表达式
  -o NOT_KEYS, --not-key=NOT_KEYS    显示忽略的 key。这可以是一个正则表达式
  -t TYPES, --type=TYPES    显示出数据类型，key 的数据类型 string(字符串)、list(链表)、set(集合)、zset(sorted set -- 有序集合)和hash（哈希类型），如果没有指定，全部数据类型将被返回
  -b BYTES, --bytes=BYTES    将内存输出限制为大于或等于的 key，单位字节
  -l LARGEST, --largest=LARGEST    将内存输出限制为只有前 N 个 key（按大小）
  -e ESCAPE, --escape=ESCAPE    将字符串转义为编码：raw（默认），print，utf8 或 base64。

如需要把匹配到的 key 的 key 和 value 用 json 的格式打印：

[root@localhost ~]# rdb --command json -k "test" /usr/local/redis/dump.rdb

此外最常用的就是把 Redis 的 rdb 内存分析报告生成 csv 文件，可以使用 awk 等相关工具分析，也可以导入数据库用以分析：

[root@localhost redis]# rdb -c memory dump.rdb > memory.csv

在生成的报表中有 database（key 在 Redis 的 db）、type（key 类型）、key（key 值）、size_in_bytes（key 的内存大小）、encoding（value 的存储编码形式）、num_elements（key 中的 value 的个数）、len_largest_element（key 中的 value 的长度）, 需要注意的如果导入数据库一定要注意导入时所用字段数据类型，如导入 MySQL 中的建表 ddl：

CREATE TABLE `memory` (
  `database` int(128) DEFAULT NULL,
  `type` varchar(128) DEFAULT NULL,
  `KEY` varchar(128) DEFAULT NULL,
  `size_in_bytes` bigint(20) DEFAULT NULL,
  `encoding` varchar(128) DEFAULT NULL,
  `num_elements` bigint(20) DEFAULT NULL,
  `len_largest_element` varchar(128) DEFAULT NULL,
  PRIMARY KEY (`KEY`)
);