持久化简介
什么是持久化
利用永久性存储介质将数据进行保存,在特定的时间将保存的数据进行恢复的工作机制称为持久化
持久化用于防止数据的意外丢失,确保数据安全性
为什么持久化
redis是将数据存储在内存上的,一旦断电,或者因为机器故障使redis服务宕机,那么存储的内容就会消失
持久化过程保存什么
RDB:将当前数据状态进行保存,快照形式,存储数据结果,存储格式简单,关注点在数据
AOF:将数据的操作过程进行保存,日志形式,存储操作过程,存储格式复杂,关注点在数据的操作过程
RDB
1.save指令进行手动RDB过程2.bgsave指令进行手动RDB过程3.save配置进行自动RDB过程4.RDB优缺点
1.save指令进行手动RDB过程
save
save指令相关配置:
设置本地数据库文件名,默认值为 dump.rdb,通常设置为 dump- 端口号 .rdb
dbfilename filename
设置存储.rdb文件的路径,通常设置成存储空间较大的目录中,目录名称 data
dir path
设置存储至本地数据库时是否压缩数据,默认yes,设置为no,节省 CPU 运行时间,但存储文件变大
rdbcompression yes|no
设置读写文件过程是否进行RDB格式校验,默认yes,设置为no,节约读写10%时间消耗,单存在数据损坏的风险
rdbchecksum yes|no
2.bgsave指令进行手动RDB过程
手动启动后台保存操作,但不是立即执行
bgsave
bgsave指令相关配置:
后台存储过程中如果出现错误现象,是否停止保存操作,默认yes
stop-writes-on-bgsave-error yes|no
其他:
dbfilename filenamedir pathrdbcompression yes|nordbchecksum yes|no
3.save配置进行自动RDB
设置自动持久化的条件,满足限定时间范围内key的变化数量达到指定数量即进行持久化
save second changes
参数
second:监控时间范围changes:监控key的变化量
范例
save 900 1save 300 10save 60 10000
其他
dbfilename filenamedir pathrdbcompression yes|nordbchecksum yes|nostop-writes-on-bgsave-error yes|no
4.RDB优缺点
RDB优点
RDB是一个紧凑压缩的二进制文件,存储效率较高RDB内部存储的是redis在某个 时间点 的数据快照,非常适合用于数据备份,全量复制等场景RDB恢复数据的速度要比AOF快很多应用:服务器中每X小时执行bgsave备份,并将RDB文件拷贝到远程机器中,用于灾难恢复。
RDB缺点
RDB方式无论是执行指令还是利用配置,无法做到实时持久化,具有较大的可能性丢失数据bgsave指令每次运行要执行fork操作创建子进程,要牺牲掉一些性能Redis的众多版本中未进行RDB文件格式的版本统一,有可能出现各版本服务之间数据格式无法兼容现象
AOF
1.AOF概念2.AOF执行策略3.AOF重写4.AOF的工作流程以及重写的工作流程
1.AOF概念
AOF(append only file)持久化:以独立日志的方式记录每次写命令,重启时再重新执行AOF文件中命令 达到恢复数据的目的。与RDB相比可以简单理解为 由记录数据改为记录数据产生的变化
AOF的主要作用是解决了数据持久化的实时性,目前已经是Redis持久化的主流方式
启动AOF相关配置:
开启AOF持久化功能,默认no,即不开启状态
appendonly yes | no
AOF持久化文件名,默认文件名为appendonly.aof,建议配置为appendonly-端口号.aof
appendfilename filename
AOF持久化文件保存路径,与RDB持久化文件保持一致即可
dir
AOF写数据策略,默认为everysec
appendfsync always | everysec | no
2.AOF执行策略
always(每次):每次写入操作均同步到AOF文件中数据零误差 , 性能较低 ,不建议使用。
everysec(每秒):每秒将缓冲区中的指令同步到AOF文件中,在系统突然宕机的情况下丢失1秒内的数据数据 准确性较高 , 性能较高 ,建议使用,也是默认配置
no(系统控制):由操作系统控制每次同步到AOF文件的周期整体过程 不可控
3.AOF重写
AOF重写
随着命令不断写入AOF,文件会越来越大,为了解决这个问题,Redis引入了AOF重写机制压缩文件体积。AOF文件重写是将Redis进程内的数据转化为写命令同步到新AOF文件的过程。简单说就是将对同一个数据的若干个条命令执行结 果转化成最终结果数据对应的指令进行记录。
AOF重写作用
降低磁盘占用量,提高磁盘利用率提高持久化效率,降低持久化写时间,提高IO性能降低数据恢复用时,提高数据恢复效率 AOF
AOF重写规则
1.进程内具有时效性的数据,并且数据已超时将不再写入文件2.非写入类的无效指令将被忽略,只保留最终数据的写入命令如del key1、 hdel key2、srem key3、set key4 111、set key4 222等如select指令虽然不更改数据,但是更改了数据的存储位置,此类命令同样需要记录3.对同一数据的多条写命令合并为一条命令如lpush list1 a、lpush list1 b、 lpush list1 c 可以转化为:lpush list1 a b c。为防止数据量过大造成客户端缓冲区溢出,对list、set、hash、zset等类型,每条指令最多写入64个元素
AOF重写方式:
手动重写
bgrewriteaof
自动重写
auto-aof-rewrite-min-size sizeauto-aof-rewrite-percentage percentage
4.AOF的工作流程以及重写的工作流程