百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

Redis持久化之RDB(redis持久化详解)

mhr18 2024-11-11 12:04 16 浏览 0 评论

Redis持久化之RDB

RDB介绍

RDB(Redis DataBase)是Redis持久化的默认机制,RDB持久化方案和AOF有本质的区别,RDB记录的是一瞬间数据库值的快照,而AOF记录的是正确执行的每条命令,这两个持久化的区别映射到现实中有点类似下棋遇到棋手有事,棋局暂停,但是为了下次不需要从头再来,RDB的方式就是给棋盘拍一张照片下次下棋直接按照照片恢复棋盘即可,而AOF则是将棋手走的每一步记录,恢复棋盘的时候需要按顺序执行每一步记录,所以在数据量大的情况下RDB持久化是很占优势的。

RDB持久化如何触发

自动触发

自动的在redis.conf配置文件中有默认配置如下所示

配置save m n表示在m秒内数据集在n次修改后将自动执行bgsave指令,触发RDB持久化。

手动触发

手动触发按照执行的线程又分为两种

  • save:在主线程中执行,Redis主线程将阻塞无法处理其它客户端请求,直到RDB持久化结束。
  • bgsave:在子线程中执行,Redis会fork一个子进程用于持久化RDB,RDB操作不会对主线程产生影响,但是fork的瞬间如果实例过大一样存在阻塞主线程的风险,这也是RDB持久化的默认配置。

补充点:

  • flushall:清空所有数据库的命令时会生成dump.rdb文件,但是毫无意义。
  • shutdown:关闭远程服务时会生成dump.rdb文件,这个是有意义的可以保证redis服务关闭,但是RDB持久化条件还未满足时,不会丢失修改数据。

持久化期间是否只读

持久化期间是否允许客户端修改数据呢?这个答案肯定是毋庸置疑的,如果Redis持久化的数据有4个G,持久化的速度为0.2G每秒,那么持久化的时间为20S,如果客户端在持久化期间无法修改数据,那相当于这20S内无法处理写请求,这对于一个高速的内存数据库而言是致命的,那么Redis是如何做到持久化时还能写入的呢?

Redis采用了操作系统提供的优化策略COW(copy on write写入时复制),在主线程fork子进程时,就会将主线程的内存页表复制一份,子线程就可以通过页表共享主线程的内存数据,当有新数据写入或者修改时主线程会将新数据或修改后的数据写到新的物理内存地址上,并修改主线程自己的内存页表,这时主线程和子线程读取的内存数据就分开了,主线程正常修改对子线程的持久化没有影响,示例图如下所示。

快照间隔如何确定

RDB持久化的间隔对Redis可靠性的保证是十分关键的,如下所示,如果Redis在t1时刻持久化完毕,还没等到t2持久化这时Redis宕机,t1时刻和t2时刻之间的修改将无法恢复。

Redis每次RDB持久化都是全量快照,这样就存在两个快照执行的中间时间修改了数据,但是服务器宕机导致中间时刻数据丢失,如果想要尽量避免只能将t1时刻和t2时刻的时间间隔缩小,这样丢失数据的风险就会降低,但是时间间隔缩小带来的影响就是频繁的持久化,虽然持久化是由子线程完成并不会阻塞当前的主线程,但这也会带来如下几方面的影响

  • 频繁的RDB持久化,也就是会频繁的往磁盘写入数据,对磁盘的压力大。
  • 虽然持久化不是主线程完成,但是fork子线程这个动作是在主线程做的,随着实例的增大,fork阻塞的时间会延长,频繁的持久化就会阻塞主线程,影响正常业务。

综上两方面考虑缩短t1时刻和t2时刻的时间间隔来达到减低数据丢失的风险,其实并不可取,那么到底如何实现呢?可以记录两次持久化间隔的每一次数据修改或新增即增量快照就可以解决数据丢失问题,如下所示。

但如果特意给RDB持久化单独保存日志信息,那么一条数据修改N次就会有N条修改记录这对于Redis的内存开销是巨大的,显然无法实施,那么有没有替代方案呢?

在Redis4.0推出了正式解决方案,AOF+RDB混合使用,内存快照RDB还是按照一定频率执行,AOF记录两次快照间的命令操作,这样就可以解决因为快照间隔时长导致的数据丢失问题,就算数据丢失也是极少量的数据。

AOF和RDB选择的问题

通过上面的思路我们知道了AOF和RDB其实可以混合使用,但是一定一定注意,不要无脑使用AOF+RDB的形式,一般可以采用如下建议

  • AOF和RDB混用的方案适用于数据不能丢失的业务场景。
  • 如果允许数据少量丢失我们可以选择RDB持久化方案。
  • 如果需要使用AOF做持久化方案那么回写策略可以选择everysec,它是可靠性和性能的折中选择。

相关推荐

Spring Boot3 连接 Redis 竟有这么多实用方式

各位互联网大厂的后端开发精英们,在日常开发中,想必大家都面临过系统性能优化的挑战。当系统数据量逐渐增大、并发请求不断增多时,如何提升系统的响应速度和稳定性,成为了我们必须攻克的难题。而Redis,这...

隧道 ssh -L 命令总结 和 windows端口转发配置

摘要:隧道ssh-L命令总结和windows端口转发配置关键词:隧道、ssh-L、端口转发、网络映射整体说明最近在项目中,因为内网的安全密级比较高,只能有一台机器连接内网数据库,推送...

火爆BOOS直聘的13个大厂Java社招面经(5年经验)助你狂拿offer

火爆BOOS直聘的13个大厂Java社招面经(5年经验)助你狂拿offer综上所述,面试遇到的所有问题,整理成了一份文档,希望大家能够喜欢!!Java面试题分享(Java中高级核心知识全面解析)一、J...

「第五期」游服务器一二三面 秋招 米哈游

一面下午2点,35分钟golang内存模型golang并发模型golanggc原理过程channel用途,原理redis数据结构,底层实现跳跃表查询插入复杂度进程,线程,协程kill原理除了kil...

RMQ——支持合并和优先级的消息队列

业务背景在一个项目中需要实现一个功能,商品价格发生变化时将商品价格打印在商品主图上面,那么需要在价格发生变动的时候触发合成一张带价格的图片,每一次触发合图时计算价格都是获取当前最新的价格。上游价格变化...

Redis 中的 zset 为什么要用跳跃表,而不是B+ Tree 呢?

Redis中的有序集合使用的是一种叫做跳跃表(SkipList)的数据结构来实现,而不是使用B+Tree。本文将介绍为什么Redis中使用跳跃表来实现有序集合,而不是B+Tree,并且探讨跳跃表...

一文让你彻底搞懂 WebSocket 的原理

作者:木木匠转发链接:https://juejin.im/post/5c693a4f51882561fb1db0ff一、概述上一篇文章《图文深入http三次握手核心问题【思维导图】》我们分析了简单的一...

Redis与Java整合的最佳实践

Redis与Java整合的最佳实践在这个数字化时代,数据处理速度决定了企业的竞争力。Redis作为一款高性能的内存数据库,以其卓越的速度和丰富的数据结构,成为Java开发者的重要伙伴。本文将带你深入了...

Docker与Redis:轻松部署和管理你的Redis实例

在高速发展的云计算时代,应用程序的部署和管理变得越来越复杂。面对各种操作系统、依赖库和环境差异,开发者常常陷入“在我机器上能跑”的泥潭。然而,容器化技术的兴起,尤其是Docker的普及,彻底改变了这一...

Java开发中的缓存策略:让程序飞得更快

Java开发中的缓存策略:让程序飞得更快缓存是什么?首先,让我们来聊聊什么是缓存。简单来说,缓存是一种存储机制,它将数据保存在更快速的存储介质中,以便后续使用时能够更快地访问。比如,当你打开一个网页时...

国庆临近,字节后端开发3+4面,终于拿到秋招第一个offer

字节跳动,先面了data部门,3面技术面之后hr说需要实习转正,拒绝,之后另一个部门捞起,四面技术面,已oc分享面经,希望对大家有所帮助,秋招顺利在文末分享了我为金九银十准备的备战资源库,包含了源码笔...

“快”就一个字!Redis凭什么能让你的APP快到飞起?

咱们今天就来聊一个字——“快”!在这个信息爆炸、耐心越来越稀缺的时代,谁不希望自己手机里的APP点一下“嗖”就打开,刷一下“唰”就更新?谁要是敢让咱用户盯着个小圈圈干等,那简直就是在“劝退”!而说到让...

双十一秒杀,为何总能抢到?Redis功不可没!

一年一度的双十一“剁手节”,那场面,简直比春运抢票还刺激!零点的钟声一敲响,亿万个手指头在屏幕上疯狂戳戳戳,眼睛瞪得像铜铃,就为了抢到那个心心念念的半价商品、限量版宝贝。你有没有发现一个奇怪的现象?明...

后端开发必看!为什么说Redis是天然的幂等性?

你在做后端开发的时候,有没有遇到过这样的困扰:高并发场景下,同一个操作重复执行多次,导致数据混乱、业务逻辑出错?别担心,很多同行都踩过这个坑。某电商平台就曾因订单创建接口在高并发时不具备幂等性,用户多...

开发一个app需要哪些技术和工具

APP开发需要一系列技术和工具的支持,以下是对这些技术的清晰归纳和分点表示:一、前端开发技术HTML用于构建页面结构。CSS用于样式设计和布局。JavaScript用于页面交互和逻辑处理。React...

取消回复欢迎 发表评论: