Redis-dump-load是基于python2.7,利用redis模块编写的一个导出/导入redis数据的一个python程序。
项目地址:https://github.com/p/redis-dump-load
python 2.7(python 3.x),pip2.7(pip 3.x),redis模块
安装程序
Linux:
1 2 3 4 5 |
# pip install redis # cd /usr/local # git clone https://github.com/p/redis-dump-load.git # cd redis-dump-load # ./redisdl.py --help |
Windows:
从项目地址中下载解压,然后进入目录用cmd命令安装依赖包
1 |
pip install -r requirements-dev.txt |
注:导出、导入命令Linux/Windows 是通用的,修改json文件路径就可以了。
导出数据
假设内网有redis:192.168.1.20:6379,现可利用redisdl.py程序导出该redis数据到本地的json文件:
1 2 3 |
# python redisdl.py -H 192.168.1.20 -p 6379 -d 0 -o /tmp/db0.json # ll /tmp/db0.json -rw-r--r--. 1 root root 411772591 Oct 17 09:15 /tmp/db0.json |
利用以上命令导出192.168.1.20:6379实例中的db0数据到本地/tmp/db0.json文件中,从info信息中可以看到db0一共有1758个key数据。
注:执行导出数据命令时,若出现类似decode(encoding)的字符类编码错误时,可将程序中‘decode(encoding)’改为如下:decode('utf-8','ignore')
导入数据
redis单实例
准备一个空的redis单实例:192.168.204.128:6379,把之前导出的/tmp/db0.json文件数据导入。
1 |
python redisdl.py -l -H 192.168.204.128 -p 6379 -d 0 /tmp/db0.json |
可以看到数据已导入,导入了1756个key,与上述看到1758个key相差了两个,大部分的key数据已导入到新的redis实例中,缺失的2个key应该是在导出数据后源redis新增的key数据。
redis_cluster
准备一个空的redis_cluster集群(192.168.1.20:8001/8002/8003),并部署corvus(redis-porxy:192.168.1.20:12345),可以利用corvus把之前到处/tmp/db0.json文件数据导入到集群中去。
集群信息:
1 |
/path/to/redis/redis-trib.rbcheck 192.168.1.20:8001 |
1 |
redis-cli -h 192.168.1.20 -p 12345 info |
数据导入:
1 |
python redisdl.py -l -H 192.168.1.20 -p 12345 -d 0 /tmp/db0.json |
分别查看8001、8002、8003三个单独rediscluster实例,可以看到通过corvus导入的数据已经分摊到各redis实例中,分别为545、626、584个keys。总数据为1755(导入后一个key过期了)。
注:redisdl.py导入数据时,会去检查redis的版本,由于使用corvus时,检查出的版本为corvus版本,比redis3.0+的版本低,故执行时会报错,需手动更改redisdl.py脚本:
1 2 3 |
vi redisdl.py version = [int(part) for part inself.info()['redis_version'].split('.')] version = 3 |
文章转载并修改:
文章评论