[转载]Redis 持久化之RDB和AOF

原文链接:https://www.cnblogs.com/itdragon/p/7906481.html

温馨提示

在正式数据(当然是非生产环境啦)练习以下操作时,一定一定一定记得备份dump.rdb文件。
我给自己的服务器添加了aof持久化配置,重启后,发现aof文件为空,就想把rdb文件恢复到redis中,所以删除了aof文件,并shutdown了服务,重启后,redis中为空,rdb文件为空,aof文件为空,悲剧了。

Redis 有两种持久化方案,RDB (Redis DataBase)和 AOF (Append Only File)。如果你想快速了解和使用RDB和AOF,可以直接跳到文章底部看总结。本章节通过配置文件,触发快照的方式,恢复数据的操作,命令操作演示,优缺点来学习 Redis 的重点知识持久化。
RDB 详解

RDB 是 Redis 默认的持久化方案。在指定的时间间隔内,执行指定次数的写操作,则会将内存中的数据写入到磁盘中。即在指定目录下生成一个dump.rdb文件。Redis 重启会通过加载dump.rdb文件恢复数据。
从配置文件了解RDB

打开 redis.conf 文件,找到 SNAPSHOTTING 对应内容
1 RDB核心规则配置(重点)

save

save ""

save 900 1
save 300 10
save 60 10000

解说:save ,满足条件就将内存中的数据同步到硬盘中。官方出厂配置默认是 900秒内有1个更改,300秒内有10个更改以及60秒内有10000个更改,则将内存中的数据快照写入磁盘。
若不想用RDB方案,可以把 save "" 的注释打开,下面三个注释。

2 指定本地数据库文件名,一般采用默认的 dump.rdb

dbfilename dump.rdb

3 指定本地数据库存放目录,一般也用默认配置

dir ./

4 默认开启数据压缩

rdbcompression yes

解说:配置存储至本地数据库时是否压缩数据,默认为yes。Redis采用LZF压缩方式,但占用了一点CPU的时间。若关闭该选项,但会导致数据库文件变的巨大。建议开启。
触发RDB快照

1 在指定的时间间隔内,执行指定次数的写操作
2 执行save(阻塞, 只管保存快照,其他的等待) 或者是bgsave (异步)命令
3 执行flushall 命令,清空数据库所有数据,意义不大。
4 执行shutdown 命令,保证服务器正常关闭且不丢失任何数据,意义...也不大。
通过RDB文件恢复数据

将dump.rdb 文件拷贝到redis的安装目录的bin目录下,重启redis服务即可。在实际开发中,一般会考虑到物理机硬盘损坏情况,选择备份dump.rdb 。可以从下面的操作演示中可以体会到。
RDB 的优缺点

优点:
1 适合大规模的数据恢复。
2 如果业务对数据完整性和一致性要求不高,RDB是很好的选择。

缺点:
1 数据的完整性和一致性不高,因为RDB可能在最后一次备份时宕机了。
2 备份时占用内存,因为Redis 在备份时会独立创建一个子进程,将数据写入到一个临时文件(此时内存中的数据是原来的两倍哦),最后再将临时文件替换之前的备份文件。
所以Redis 的持久化和数据的恢复要选择在夜深人静的时候执行是比较合理的。
操作演示

[root@itdragon bin]# vim redis.conf
save 900 1
save 120 5
save 60 10000
[root@itdragon bin]# ./redis-server redis.conf
[root@itdragon bin]# ./redis-cli -h 127.0.0.1 -p 6379
127.0.0.1:6379> keys
(empty list or set)
127.0.0.1:6379> set key1 value1
OK
127.0.0.1:6379> set key2 value2
OK
127.0.0.1:6379> set key3 value3
OK
127.0.0.1:6379> set key4 value4
OK
127.0.0.1:6379> set key5 value5
OK
127.0.0.1:6379> set key6 value6
OK
127.0.0.1:6379> SHUTDOWN
not connected> QUIT
[root@itdragon bin]# cp dump.rdb dump_bk.rdb
[root@itdragon bin]# ./redis-server redis.conf
[root@itdragon bin]# ./redis-cli -h 127.0.0.1 -p 6379
127.0.0.1:6379> FLUSHALL
OK
127.0.0.1:6379> keys

(empty list or set)
127.0.0.1:6379> SHUTDOWN
not connected> QUIT
[root@itdragon bin]# cp dump_bk.rdb dump.rdb
cp: overwrite `dump.rdb'? y
[root@itdragon bin]# ./redis-server redis.conf
[root@itdragon bin]# ./redis-cli -h 127.0.0.1 -p 6379
127.0.0.1:6379> keys *
1) "key5"
2) "key1"
3) "key3"
4) "key4"
5) "key6"
6) "key2"

第一步:vim 修改持久化配置时间,120秒内修改5次则持久化一次。
第二步:重启服务使配置生效。
第三步:分别set 5个key,过两分钟后,在bin的当前目录下会自动生产一个dump.rdb文件。(set key6 是为了验证shutdown有触发RDB快照的作用)
第四步:将当前的dump.rdb 备份一份(模拟线上工作)。
第五步:执行FLUSHALL命令清空数据库数据(模拟数据丢失)。
第六步:重启Redis服务,恢复数据.....咦????( ′◔ ‸◔`)。数据是空的????这是因为FLUSHALL也有触发RDB快照的功能。
第七步:将备份的 dump_bk.rdb 替换 dump.rdb 然后重新Redis。

注意点:SHUTDOWN 和 FLUSHALL 命令都会触发RDB快照,这是一个坑,请大家注意。

其他命令:

keys * 匹配数据库中所有 key
save 阻塞触发RDB快照,使其备份数据
FLUSHALL 清空整个 Redis 服务器的数据(几乎不用)
SHUTDOWN 关机走人(很少用)

AOF 详解

AOF :Redis 默认不开启。它的出现是为了弥补RDB的不足(数据的不一致性),所以它采用日志的形式来记录每个写操作,并追加到文件中。Redis 重启的会根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作。
从配置文件了解AOF

打开 redis.conf 文件,找到 APPEND ONLY MODE 对应内容
1 redis 默认关闭,开启需要手动把no改为yes

appendonly yes

2 指定本地数据库文件名,默认值为 appendonly.aof

appendfilename "appendonly.aof"

3 指定更新日志条件

appendfsync always

appendfsync everysec

appendfsync no

解说:
always:同步持久化,每次发生数据变化会立刻写入到磁盘中。性能较差当数据完整性比较好(慢,安全)
everysec:出厂默认推荐,每秒异步记录一次(默认值)
no:不同步

4 配置重写触发机制

auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb

解说:当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。一般都设置为3G,64M太小了。
触发AOF快照

根据配置文件触发,可以是每次执行触发,可以是每秒触发,可以不同步。
根据AOF文件恢复数据

正常情况下,将appendonly.aof 文件拷贝到redis的安装目录的bin目录下,重启redis服务即可。但在实际开发中,可能因为某些原因导致appendonly.aof 文件格式异常,从而导致数据还原失败,可以通过命令redis-check-aof --fix appendonly.aof 进行修复 。从下面的操作演示中体会。
AOF的重写机制

前面也说到了,AOF的工作原理是将写操作追加到文件中,文件的冗余内容会越来越多。所以聪明的 Redis 新增了重写机制。当AOF文件的大小超过所设定的阈值时,Redis就会对AOF文件的内容压缩。

重写的原理:Redis 会fork出一条新进程,读取内存中的数据,并重新写到一个临时文件中。并没有读取旧文件(你都那么大了,我还去读你??? o(゚Д゚)っ傻啊!)。最后替换旧的aof文件。

触发机制:当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。这里的“一倍”和“64M” 可以通过配置文件修改。
AOF 的优缺点

优点:数据的完整性和一致性更高
缺点:因为AOF记录的内容多,文件会越来越大,数据恢复也会越来越慢。
操作演示

[root@itdragon bin]# vim appendonly.aof
appendonly yes
[root@itdragon bin]# ./redis-server redis.conf
[root@itdragon bin]# ./redis-cli -h 127.0.0.1 -p 6379
127.0.0.1:6379> keys
(empty list or set)
127.0.0.1:6379> set keyAOf valueAof
OK
127.0.0.1:6379> FLUSHALL
OK
127.0.0.1:6379> SHUTDOWN
not connected> QUIT
[root@itdragon bin]# ./redis-server redis.conf
[root@itdragon bin]# ./redis-cli -h 127.0.0.1 -p 6379
127.0.0.1:6379> keys

1) "keyAOf"
127.0.0.1:6379> SHUTDOWN
not connected> QUIT
[root@itdragon bin]# vim appendonly.aof
fjewofjwojfoewifjowejfwf
[root@itdragon bin]# ./redis-server redis.conf
[root@itdragon bin]# ./redis-cli -h 127.0.0.1 -p 6379
Could not connect to Redis at 127.0.0.1:6379: Connection refused
not connected> QUIT
[root@itdragon bin]# redis-check-aof --fix appendonly.aof
'x 3e: Expected prefix '', got: '
AOF analyzed: size=92, ok_up_to=62, diff=30
This will shrink the AOF from 92 bytes, with 30 bytes, to 62 bytes
Continue? [y/N]: y
Successfully truncated AOF
[root@itdragon bin]# ./redis-server redis.conf
[root@itdragon bin]# ./redis-cli -h 127.0.0.1 -p 6379
127.0.0.1:6379> keys

1) "keyAOf"

第一步:修改配置文件,开启AOF持久化配置。
第二步:重启Redis服务,并进入Redis 自带的客户端中。
第三步:保存值,然后模拟数据丢失,关闭Redis服务。
第四步:重启服务,发现数据恢复了。(额外提一点:有教程显示FLUSHALL 命令会被写入AOF文件中,导致数据恢复失败。我安装的是redis-4.0.2没有遇到这个问题)。
第五步:修改appendonly.aof,模拟文件异常情况。
第六步:重启 Redis 服务失败。这同时也说明了,RDB和AOF可以同时存在,且优先加载AOF文件。
第七步:校验appendonly.aof 文件。重启Redis 服务后正常。

补充点:aof 的校验是通过 redis-check-aof 文件,那么rdb 的校验是不是可以通过 redis-check-rdb 文件呢???
总结

Redis 默认开启RDB持久化方式,在指定的时间间隔内,执行指定次数的写操作,则将内存中的数据写入到磁盘中。
RDB 持久化适合大规模的数据恢复但它的数据一致性和完整性较差。
Redis 需要手动开启AOF持久化方式,默认是每秒将写操作日志追加到AOF文件中。
AOF 的数据完整性比RDB高,但记录内容多了,会影响数据恢复的效率。
Redis 针对 AOF文件大的问题,提供重写的瘦身机制。
若只打算用Redis 做缓存,可以关闭持久化。
若打算使用Redis 的持久化。建议RDB和AOF都开启。其实RDB更适合做数据的备份,留一后手。AOF出问题了,还有RDB。

到这里Redis 的持久化就介绍完了,有什么不对的地方可以指出。

转载于:https://www.cnblogs.com/Candies/p/11356461.html

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/549670.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

C++_练习—构造与析构

构造与析构 1 #include <iostream>2 3 using namespace std;4 5 class info {6 public:7 info(int a);8 info(int a, int b);9 info(int a,int b,int c); 10 11 ~info(); // 无类型无返无参 12 13 private: 14 int age; 15 int *temp; 16 }; …

分布式 dynamips+dyangen (更新于07.3.30)

更新内容&#xff1a;很多网友都反映用此文方法行不通&#xff0c;现象为&#xff1a;分布在各计算机上的路由器能起来&#xff0c;但互联的端口是Down的&#xff0c;以至于ping 不通。在此特别感谢 flyxj 网友QQ联系到我才引起我的高度注视使问题得到解决&#xff0c;不会再给…

vs 运行的时候产生伴随cmd窗口

简介 很多程序运行的时候&#xff0c;需要输出调试信息。如果没有伴随cmd窗口的话&#xff0c;输出的信息很难被看到 参考链接 https://blog.csdn.net/weixin_39278265/article/details/81865362 转载于:https://www.cnblogs.com/eat-too-much/p/11357709.html

tcl学习---windows下安装及运行环境

以前一直用tcl&#xff0c;但是面试的时候发现很多基本的概念竟然又忘记了。有什么好说的&#xff0c;从头到尾再实践一遍吧~~~~1&#xff1a;下载windows版本不方便UNIX/LINUX,所以直接下载windows版本&#xff0c;现在版本已经到8.5了&#xff1b;下载链接&#xff1a;[url]h…

OCP-052考试题库汇总(33)-CUUG内部解答版

Which two can be exported by a non-administrative account by using Data Pump? A)directory objects B)tables C)tablespaces D)schemas E)database Answer: BD 赵&#xff1a; EXP 和 IMP 是客户端工具程序&#xff0c;它们既可以在客户端使用&#xff0c;也可以在服务端…

linux mesg 命令详解

linux mesg 命令详解功能说明&#xff1a;设置终端机的写入权限。语  法&#xff1a;mesg [ny]补充说明&#xff1a;将mesg设置y时&#xff0c;其他用户可利用write指令将信息直接显示在您的屏幕上。参  数&#xff1a;n 不允许气筒用户将信息直接显示在你的屏幕上。y 允许…

OCP-052考试题库汇总(34)-CUUG内部解答版

Where is an expdp operation tracked? A)dump files B)control file C)log files D)Automatic Diagnostic Repository(ADR) E)master table (MT) Answer: E 赵&#xff1a; 题译&#xff1a;哪里有一个 Exdp 操作跟踪? Master table 是一个临时 table&#xff0c;专门为 imp…

C++_练习—元友三友

元友三友 元友函数&#xff1a; 全局函数作为友元函数&#xff1a; 1 #include <iostream>2 3 using namespace std;4 5 class info {6 public:7 void init(int a);8 friend void yuan_fun(info a); // 注意元友函数的参数&#xff01;&#xff01;9 10 private…

关于《详解》第12.1节按键驱动的进一步阐述

《详解》12.1的按键驱动&#xff0c;是本书的最大失误&#xff0c;应大家的要求&#xff0c;我们很有必要对其进行再次阐述。注意标题是“按键”驱动而非“键盘”驱动&#xff0c;按键往往是一个按钮直接对应于一个可中断的GPIO&#xff0c;而键盘则有一个行列矩阵&#xff0c;…

几件欣慰的事,关于.Net的培训和嵌入式开发效率

到软件园这边已经好几个月了&#xff0c;以前.Net的相关的一些东西都慢慢的没怎么接触了。而我去一直在关心相关的东西。以前订阅的一些东西还是很有用的&#xff0c;收集一些相关的资料&#xff0c;也了解一些相关的培训信息。值得欣慰的是&#xff0c;很多培训都是在软件园这…

C++_练习—继承_公有继承

公有继承 公有继承 public&#xff1a; 当类的继承方式为公有继承时,基类的公有和保护成员的访问属性在派生类中 不变,而基类的私有成员不可访问。 即基类的公有成员和保护成员被继承到派生类中仍作为派生类的公有成员和保护成员。派生类的其他成员可以直接访问它们。无 论派…

MYSQLMANAGER实例管理器总结

好久没有写文章了&#xff0c;今天来看看MYSQL的实例管理器&#xff08;MYSQLMANAGER&#xff09;。一、简单介绍&#xff1a;1、MySQL实例管理器(IM)是通过TCP/IP端口运行的后台程序&#xff0c;用来监视和管理MySQL数据库服务器实例。&#xff08;如果你之前用过MYSQLD_MULTI…

C++_练习—继承_保护继承

保护继承 protected&#xff1a;保护继承 保护继承&#xff1a;当保护继承时&#xff0c;基类的公有和保护成员变成派生类的保护成员,私有成员不可直接访问&#xff01; 1 #include <iostream>2 3 using namespace std;4 5 class info {6 public:7 void setter(int a…

C++_练习—继承_私有继承

私有继承 私有继承&#xff1a;当私有继承时&#xff0c;基类的公有和保护成员变成派生类的私有成员&#xff0c;私有成员不可直接访问 1 #include <iostream>2 3 using namespace std;4 5 class info {6 public:7 void setter(int a, int b) {8 num a;9 …

这些天

几个月晃一下就过去了&#xff0c;再次重温&#xff0c;呵&#xff0c;已荒废好久&#xff01;忘记了发生过什么&#xff0c;脑子里面已是一片模糊。记得过年时&#xff0c;期盼有个好运的2008&#xff0c;却也发生了伤感的事&#xff0c;高兴的事&#xff0c;和无聊的事&#…

阿里巴巴右侧6滑块VS雅虎右侧6滑块VS自定义6滑块

http://bbs.blueidea.com/thread-2824205-1-2.htmlhttp://bbs.blueidea.com/thread-2824205-1-2.html阿里巴巴&#xff1a;http://www.chenbincb.com.cn/cnblogs/demo13/1.html 雅虎&#xff1a;http://www.chenbincb.com.cn/cnblogs/demo13/2.html 自定义&#xff1a;http://w…

C++_练习—继承_多继承

多继承 多继承&#xff1a;派生类继承多个基类&#xff08;继承多父类特性&#xff09; 语法&#xff1a;class <派生类名>: <继承方式1><基类名1> , <继承方式2><基类名2> , ...{ <派生类类体>; } 1 #include <iostream>2 3 using …

换了坐骑

公司本来发了个DELL D400。好大好沉啊。&#xff08;虽然加了配置&#xff09;所以一直在使用自己的lenovo。今天总算给换了一个别的本本。当然不是新本本啦。不过也不错。毕竟才来还没一年。淘汰给我的那哥们跟我关系不错。他换了新的联想的天逸系列。 也是挺高配的。双核啊。…

C++_练习—继承_构造析构

构造析构 继承与构造析构&#xff1a; 在子类对象构造时&#xff0c;需要调用父类构造函数对其继承得来的成员进行初始化 在子类对象析构时&#xff0c;需要调用父类析构函数对其继承得来的成员进行清理 1 #include <iostream>2 3 using namespace std;4 5 class info1 {…

C++_练习—继承_构造初始化列表

构造初始化列表 构造对象成员的顺序跟初始化列表无关&#xff0c;跟定义顺序有关 1 #include <iostream>2 3 using namespace std;4 5 class info {6 public:7 info(int a) {8 age a;9 cout << age << endl; 10 cout << …