Redis持久化（*）

Posted 2022-08-18 Firm陈

Redis的持久化方式

Redis的持久化有两种方式：RDB和AOF，redis默认采用的是RDB的方式。

RDB
在默认配置中，Redis将内存数据快照保存在名字为dump.rdb的二进制文件中。
可以配置持久化策略：save N M，让redis在“N秒内至少有M个改动”才会触发一次rdb持久化操作。
例如redis的默认策略有：

save 900 1 – 900秒内至少有一个改动
save 300 10 – 300秒内至少有10个改动
save 60 10000 – 60秒内至少有10000个改动

还可以手动执行命令生成RDB快照，进入redis客户端执行命令save或bgsave可以生成dump.rdb文件，每次命令执行都会将所有redis内存快照到一个新的rdb文件里，并覆盖原有rdb快照文件。

bgsave写时复制的（COW）机制
Redis借助了linux系统的写时复制（Copy-On-Write）技术，在生成快照的同时，仍然可以接收命令处理数据。简单来说，bgsave线程是由主线程fork生成的子线程，可以共享主线程所有的内存数据。bgsave线程运行后，开始读取主线程的内存数据，也就是redis的内存数据，将内存数据写入到dump.rdb文件中。此时，如果主线程处理的命令都是读操作，则bgsave线程不受影响。如果主线程处理了写操作，则会对该命令操作的数据复制一份，生成副本，bgsave线程会把这个副本写入到dump.rdb文件中，而在这个过程中，主线程仍可执行命令。

save于bgsave对比：

配置自动生成rdb文件，后台使用的是bgsave方式。

RDB方式优缺点：
缺点：
RDB每次持久化需要将所有内存数据写入文件，然后替换原有文件，当内存数据量很大的时候，频繁的生成快照会很耗性能。
如果将生成快照的策略设置的时间间隔很大，会导致redis宕机的时候丢失数据。
优点：
因为dump.rdb文件是二进制文件，所以当redis服务崩溃恢复的时候，能很快的将文件数据恢复到内存之中。

AOF(Append-Only File)
为解决RDB方式丢失数据的问题，从1.1版本开始，redis增加了一种更加可靠的方式：AOF持久化方式。在使用AOF方式时，redis每执行一次修改数据命令，都会将该命令追加到appendonly.aof文件中（先写入os cache，然后通过fsync刷盘）。
可以通过修改配置文件来使用AOF：

# appendonly yes

redis重启的时候，会重放appendonly.aof中的命令恢复数据。

AOF可以配置三种刷盘策略：

appendfsync always：每次执行写命令都会刷盘，非常慢，也非常安全。
appendfsync everysec：每秒刷盘一次，兼顾性能和安全。
appendfsync no：将刷盘操作交给系统，很快，不安全。

推荐使用everysec，该策略下，最多会丢1秒的数据。

AOF重写:
应为appendonly.aof文件中存储的是执行命令，所以会产生很多没用的命令，因此，redis会定期根据最新的内存数据生成新的aof文件。

如下两个配置可以控制aop文件重写的频率：

 # auto‐aof‐rewrite‐min‐size 64mb：	-- aof文件至少达到了64m才会触发重写
 # auto‐aof‐rewrite‐percentage 100：	-- 距离上次重写增长了100%才会再次触发重写

AOF也可以手动触发重写：bgrewriteof
注意，AOF重写redis会fork出一个子进程去做(与bgsave命令类似)，不会对redis正常命令处理有太多
影响

RDB与AOF对比

生产环境可以都启用，redis启动时如果既有rdb文件又有aof文件则优先选择aof文件恢复数据，因为aof一般来说数据更全一点。

Redis 4.0混合持久化
重启 Redis 时，我们很少使用 RDB来恢复内存状态，因为会丢失大量数据。我们通常使用 AOF 日志重放，但是重放 AOF 日志性能相对 RDB来说要慢很多，这样在 Redis 实例很大的情况下，启动需要花费很长的时间。 Redis 4.0 为了解决这个问题，带来了一个新的持久化选项——混合持久化。
通过如下配置可以开启混合持久化(必须先开启aof)：

 # aof‐use‐rdb‐preamble yes

如果开启了混合持久化，AOF在重写时，不再是单纯将内存数据转换为RESP命令写入AOF文件，而是将重写这一刻之前的内存做RDB快照处理，并且将RDB快照内容和增量的AOF修改内存数据的命令存在一起，都写入新的AOF文件，新的文件一开始不叫appendonly.aof，等到重写完成，新的AOF文件才会进行改名，覆盖原有的AOF文件，完成新旧两个AOF文件的替换。
于是在 Redis 重启的时候，可以先加载 RDB 的内容，然后再重放增量 AOF 日志就可以完全替代之前的AOF 全量文件重放，因此重启效率大幅得到提升。
混合持久化AOF文件结构如下：

Redis数据备份策略
1、写crontab定时调度脚本，每小时都copy一份rdb或aof的备份到一个目录中去，仅仅保留最近48
小时的备份。
2、每天都保留一份当日的数据备份到一个目录中去，可以保留最近1个月的备份。
3、每次copy备份的时候，都把太旧的备份给删了。
4、每天晚上将当前机器上的备份复制一份到其他机器上，以防机器损坏。