Redis持久化机制RDB的实现

 更新时间:2023年12月19日 16:04:54   作者:shark-chili  
在Redis中,RDB是一种将内存中的数据保存到磁盘上的持久化机制,本文主要介绍了Redis持久化机制RDB的实现,具有一定的参考价值,感兴趣的可以了解一下

基础

了解过Redis持久化RDB嘛?可不可以解释一下什么是RDB。

答: RDB持久化机制是将内存中的数据生成快照并持久化到磁盘的过程,RDB可以通过手动或者自动的方式实现持久化。

那RDB触发的方式有哪几种方式知道吗?

答: 有两种,分别是手动触发和自动触发:

手动触发

首先是save命令了,这个指令会直接阻塞当前redis服务器,知道RDB完成了为止,对于线上生产环境数据的备份,我们非常非常不建议使用这种方式。

127.0.0.1:6379> save
OK

接下来就是bgsave指令了,bgsave则是主进程fork一个子进程,由子进程完成持久化操作,而主进程继续处理客户端的读写请求,如果我们需要手动实现持久化,非常推荐使用这种方式。

# 从输出我们就可以看出这种方式会将持久化的操作放在后台执行
127.0.0.1:6379> bgsave
Background saving started

接下来就是自动触发了

自动触发我们可以通过配置实现redis.confsave参数实现,如下所示,假如我们希望用户20s内写入3次就进行持久化,只需在配置中加一条save 20 3即可。

save 20 3

需要注意的是save 20 3的20s是以redis的时间间隔为主,并不是用户第1次写入后的20s内再写入两次进行持久化。

在这里插入图片描述

哦,那你能不能给我讲一下bgsave的工作流程呢?

答: bgsave的工作流程如下图所示,整体可以简述为:

  • 主进程fork出一个子进程,这时候主进程会被阻塞。
  • 子进程创建完成后,redis客户端会输出Background saving started,这就意味子进程开始进行持久化操作了。
  • 子进程持久化完成后,会生成一个rdb文件,将本次的rdb文件通过原子替换的方式将上一次备份的rdb覆盖。
  • 子进程发送信号通知父进程本次任务完成。

在这里插入图片描述

RDB常见的配置参数有哪些了解嘛?

答: 首先是dbfilename ,它可以指定rdb的文件名

# The filename where to dump the DB
dbfilename dump.rdb

接下来就是dir,它可以指定rdb文件的持久化的位置,默认取redis服务端的位置。

dir ./

reids无法将文件写入磁盘,我们可以讲stop-writes-on-bgsave-error设置为yes,直接关掉redis的写操作,默认为yes

stop-writes-on-bgsave-error yes

rdbcompression 开启后,redis默认会通过LZF算法压缩rdb文件。这种方式会消耗CPU,但是压缩后的大小远远小于内存,但是带来的收益却远远大于这点开销,通过压缩的文件无论是通过网络发送到从节点还是存储到硬盘的空间都是非常可观的。

rdbcompression yes

rdbchecksum 开启后,在存储快照后,还可以让redis使用CRC64算法来进行数据校验,但是这样做会增加大约10%的性能消耗,如果希望获取到最大的性能提升,可以关闭此功能。

rdbchecksum yes

说了那么多,可不可以给我演示一下RDB的使用方式

答: 没问题,我们首先需要存点数据,20s存3个值

127.0.0.1:6379> set k1 v1
OK
127.0.0.1:6379> set k2 v2
OK
127.0.0.1:6379> set k3 v3
OK

完成后查看是否生成rdb文件,确认无误后,我们将这个文件备份,并强制关闭redis服务端,模拟断电的场景

# 重命名rdb文件
[root@iZ8vb7bhe4b8nhhhpavhwpZ sbin]# mv dump.rdb dump.rdb.bak

此时我们再启动redis就会发现数据为空

127.0.0.1:6379> keys *
(empty array)

我们将rdb文件还原,并重启redis,可以发现备份数据还原了

# 强制关闭redis
[root@iZ8vb7bhe4b8nhhhpavhwpZ sbin]# ps -ef |grep redis |grep -v grep
root      8956     1  0 23:22 ?        00:00:00 redis-server 127.0.0.1:6379
[root@iZ8vb7bhe4b8nhhhpavhwpZ sbin]# kill -9 8956

# 还原rdb,并启动redis
[root@iZ8vb7bhe4b8nhhhpavhwpZ sbin]# mv dump.rdb.bak dump.rdb
[root@iZ8vb7bhe4b8nhhhpavhwpZ sbin]# redis-server /root/redis/redis.conf
[root@iZ8vb7bhe4b8nhhhpavhwpZ sbin]# redis-cli

# 可以看到之前设置的数据都回来了
127.0.0.1:6379> keys *
1) "k3"
2) "k2"
3) "k1"

:当我们使用shutdown指令也会自动触发bgsave,读者可以自行测试。

不错,那你可以说说RDB有哪些优缺点嘛?

答: 首先说说优点吧:

  • rdb是紧凑压缩的二进制文件,非常实用与备份或者全景复制等场景。
  • rdb恢复数据效率远远高于aof

而缺点如下:

  • 无法做到毫秒级别的实时性持久化,尽管我们可以通过设置紧凑的save完成持久化,但是频繁的fork子进程进行持久化,很可能造成redis主进行长期阻塞。
  • 存储的文件是二进制,不够直观,可能还存在某些兼容问题。

进阶

生产环境大内存的redis数据如何在持久化的时候保持数据一致性呢?

答: redis的rdb持久化是基于Copy on write (写时复制思想)redisfork一个子进程完成数据持久化,再此期间发生的原数据修改或者写入的新数据都会生成一个数据副本存到一个新的内存区域中,bgsave子进程快照完成后,再将这块内存区域同步到原来的内存区域中,等待下一次快照。

这样做的缺点也很明显,极端情况下,如果在bgsave期间主进程数据都被改了,那么内存占用就是原来的两倍。

在这里插入图片描述

哦,那在进行快照操作的这段时间,如果发生服务崩溃怎么办?

答: 服务恢复的数据只会是上一次备份的rdb文件数据,因为bgsave子进程只会将操作成功的文件生成rdb文件覆盖上一次备份的文件。

可以每秒做一次快照吗?

答: emmm,可以倒是可以,但是可能会有下面这几个问题:

  • 频繁写入内存数据会给磁盘带来很大的压力,多个fork子进程抢占优先的磁盘带宽,前一个子进程没写完,后一个子进程又来写入。
  • rdb持久化每次fork子进程都会阻塞主进程,频繁fork很可能导致主进程长期处于阻塞状态。

参考文献

Redis持久化简介

Redis常见面试题总结(上)

面试必问的 Redis:RDB、AOF、混合持久化

到此这篇关于Redis持久化机制RDB的实现的文章就介绍到这了,更多相关Redis持久化机制RDB内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • Redis的BitMap使用操作命令

    Redis的BitMap使用操作命令

    Redis 为我们提供了位图这一数据结构,每个用户每天的登录记录只占据一位,365天就是365位,仅仅需要46字节就可存储,极大地节约了存储空间,这篇文章主要介绍了Redis的BitMap使用操作命令,需要的朋友可以参考下
    2023-10-10
  • Redis中LRU淘汰策略的深入分析

    Redis中LRU淘汰策略的深入分析

    这篇文章主要给大家介绍了关于Redis中LRU淘汰策略的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用Redis具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧
    2019-06-06
  • redis实现延时队列的两种方式(小结)

    redis实现延时队列的两种方式(小结)

    这篇文章主要介绍了redis实现延时队列的两种方式(小结),文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2021-04-04
  • redis持久化的介绍

    redis持久化的介绍

    今天小编就为大家分享一篇关于redis持久化的介绍,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2019-01-01
  • redis 解决库存并发问题实现数量控制

    redis 解决库存并发问题实现数量控制

    本文主要介绍了redis 解决库存并发问题实现数量控制,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2022-04-04
  • Redis实现信息已读未读状态提示

    Redis实现信息已读未读状态提示

    这篇文章主要介绍了Redis实现信息已读未读状态提示的相关资料,需要的朋友可以参考下
    2016-04-04
  • Redis分布式限流组件设计与使用实例

    Redis分布式限流组件设计与使用实例

    本文主要讲解基于 自定义注解+Aop+反射+Redis+Lua表达式 实现的限流设计方案。实现的限流设计与实际使用。具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2021-08-08
  • 详解Redis缓存与Mysql如何保证双写一致

    详解Redis缓存与Mysql如何保证双写一致

    缓存和数据库如何保证数据的一致是个很经典的问题,这篇文章就来和大家一起探讨一下Redis缓存与Mysql如何保证双写一致,感兴趣的小伙伴可以参考下
    2023-12-12
  • MyBatis缓存和二级缓存整合Redis的解决方案

    MyBatis缓存和二级缓存整合Redis的解决方案

    这篇文章主要介绍了MyBatis缓存和二级缓存整合Redis,将MyBatis缓存和二级缓存整合Redis,可以提高查询效率,同时也能保证数据的可靠性和一致性,需要的朋友可以参考下
    2023-07-07
  • Redis+Hbase+RocketMQ 实际使用问题案例讲解

    Redis+Hbase+RocketMQ 实际使用问题案例讲解

    这篇文章主要介绍了Redis+Hbase+RocketMQ 实际使用问题案例分享,本文结合示例代码给大家讲解的非常详细,需要的朋友可以参考下
    2023-01-01

最新评论