Redis 持久化之 RDB & AOF

1、简介

        Redis 是一个基于内存的 key-value 类型的 Nosql 数据库,经常用来做缓存操作,但是一旦Redis 宕机,重启之后数据会丢失,因此,需要将内存数据进行持久化,保证服务重启后数据能够恢复之前的状态。Redis 持久化有两种方式:RDB 和 AOF。

2、RDB 持久化

        rdb 持久化是内存中的数据集快照写入磁盘,在恢复时再将硬盘中的文件直接读回内存,备份时是全量备份,保存在dump.rdb文件中。

2.1、配置 RDB 持久化
# 1、Redis 7重新指定自动触发 rdb 备份文件的标准
save 3600 1 300 100 60 10000  # 也可以自定义
# 2、指定生成rdb文件的名称
dbfilename dump.rdb
# 3、指定rdb文件的保存路径
dir ./testdata
# 4、备份出错停止接受新的请求
stop-writes-on-bgsave-error yes   # 默认开启
# 5、开启压缩rdb功能
rdbcompression yes  # 会消耗cpu资源,看情况开启,默认开启
# 6、数据校验
rdbchecksum yes  # 默认开启
2.2、触发 RDB 文件备份的情况

1)、配置文件中满足默认备份配置条件;

2)、在客户端手动执行 save/bgsave,save会阻塞当前Redis服务,不推荐使用,bgsave会fork出子线程执行 RDB 持久化,不会阻塞,推荐使用;

3)、执行flushall/flushdb也会触发 RDB 持久化,只不过生成的是空文件,将备份后的 RDB 文件移动到另外一个位置在执行 flush 操作,否则备份无意义;

4)、执行shutdown且没有开启 AOF 持久化也会触发 RDB 持久化;

5)、主从复制时,主节点自动触发。

2.3、通过 RDB 文件恢复数据

        将备份生成的 RDB 文件放到 Redis 的设置的数据保存目录下,启动 Redis 服务就可以恢复数据。(要和设置的 dir 参数和 dbfilename 参数保持一致 )。

2.4、查看最后一次备份时间

        通过以下命令查询:

# 1、从Redis中获取最后一次备份的时间戳
lastsave
# 2、在linux系统上将时间戳转化成时间
date -d @时间戳
3、AOF持久化

        AOF持久化是以日志的形式来记录每个写操作(读操作不记录),只追加不改写文件,Redis重启读取该文件将其中的命令一行一行执行,默认情况下Redis 是没有开启 AOF 的功能。

3.1、AOF 持久化配置
# 1、开启 aof 备份
appendonly yes  # 默认为 no
# 2、指定aof文件名
appendfilename "appendonly.aof"
# 3、指定aof保存路径,此路径是拼接 dir 的路径(与redis6有差别)
appenddirname "appendonlydir"
# 4、将aof文件刷新到磁盘的频率
# appendfsync always   # 有写操作就刷新
appendfsync everysec   # 每秒刷新一次
# appendfsync no       # 不刷新,由操作系统决定
# 5、redis7 将aof文件分成3个部分
appendonly.aof.1.base.rdb   # 基本文件
appendonly.aof.1.incr.aof   # 增加写操作记录文件
appendonly.aof.manifest     # 清单文件
# 6、aof文件重写
auto-aof-rewrite-percentage 100 # 根据上次重写后的aof大小,判断当前aof大小是不是增长了1倍
auto-aof-rewrite-min-size 64mb  # 重写时满足的文件大小为64mb
3.2、触发 AOF 重写的情况

1)、满足配置文件中重写要求;

2)、手动在客户端执行 bgrewriteaof 命令。

4、RDB 和 AOF 文件错误修复

        使用 redis-check-aof/rdb --fix  *.aof/*.rdb 命令进行修复。

5、混合持久化

        由于使用RDB 持久化的方式效率高,但是会丢失数据,aof 相对来说效率低一些,至于使用哪种持久化的方式,官网推荐使用混合持久化的方式。RDB镜像做全量持久化,AOF做增量持久化。

5.1、如果两种持久化方式都开启,未开启混合持久化数据文件加载顺序

        会优先加载 AOF 文件。

5.2、开启混合持久化的配置
# 1、开启混合持久化必须开启 AOF 持久化
appendonly yes
# 2、开启混合持久化
aof-use-rdb-preamble yes
 5.3、混合持久化文件格式

        混合持久化先使用RDB进行快照存储,然后使用AOF持久化记录所有的写操作,当重写策略满足或手动触发重写的时候,将最新的数据存储为新的RDB记录。这样的话,重启服务的时候会从RDB和AOF两部分恢复数据,既保证了数据完整性,又提高了恢复数据的性能。简单来说:混合持久化方式产生的文件一部分是RDB格式,一部分是AOF格式。AOF包括了RDB头部+AOF混写。格式如下图所示。

6、Redis 禁用持久化
# 1、禁用rdb配置
save ""
# 2、禁用 aof 配置
appendonly no

注:在禁用持久化的配置下,我们还可以通过 save/bgsave 来生成rdb文件,还可以通过 bgrewriteaof 生成 aof 文件。

7、总结

        本文详细介绍Redis7持久化机制,帮助大家更加了解Redis是如何进行数据存储到磁盘的,加深对Redis的掌握和理解。

        本人是一个从小白自学计算机技术,对运维、后端、各种中间件技术、大数据等有一定的学习心得,想获取自学总结资料(pdf版本)或者希望共同学习,关注微信公众号:it自学社团。后台回复相应技术名称/技术点即可获得。(本人学习宗旨:学会了就要免费分享)