高工面试之:redis的几种集群方式你都熟悉吗?
mhr18 2024-10-26 10:47 26 浏览 0 评论
Redis三种集群方式:主从复制、哨兵模式和Cluster模式
一、主从复制模式
Redis配置成主从模式,主库(Master)只负责客户端的写数据,从库(Slave)只负责客户端的读数据。
主从数据复制过程如图所示:
主从复制原理:
- slave redis连接master redis,发送sync命令;
- master redis接收到sync命名后,执行BGSAVE命令生成RDB文件,使用缓冲区记录此后执行的所有写命令;
- master redis BGSAVE执行完后,向所有slave redis发送快照文件,并在发送期间继续记录被执行的写命令;
- slave redis收到快照文件后丢弃所有旧数据,载入收到的快照;
- master redis快照发送完毕后开始向slave redis发送缓冲区中的写命令;
- slave redis器完成对快照的载入,开始接收命令请求,并执行来自master redis缓冲区的写命令;
- master redis每执行一个写命令就会向slave redis发送相同的写命令,slave redis接收并执行收到的写命令
主从复制优缺点:
优点:
- 实现读写分离:客户端从master redis写数据,从slave redis读数据
- 支持主从复制:master redis自动将数据同步到slave redis
- Slave分载Master的同步压力:slave可以接受其它Slaves的连接和同步请求
- Master Server是以非阻塞的方式为Slaves提供服务:在Master-Slave同步期间,客户端仍然可以提交查询或修改请求
- Slave Server同样是以非阻塞的方式完成数据同步:在同步期间,如果有客户端提交查询请求,Redis则返回同步之前的数据
缺点:
- 不具备自动容错和恢复功能:主机从机的宕机都会导致前端部分读写请求失败,需要等待机器重启或者手动切换前端的IP才能恢复;宕机前有部分数据未能及时同步到从机,切换IP后还会引入数据不一致的问题,降低了系统的可用性
- 较难支持在线扩容:在集群容量达到上限时在线扩容会变得很复杂。
二、哨兵模式
哨兵模式:
在主从复制模式中当主服务器中断服务后,需要人工手动操作来将一个从服务器升级为主服务器,以便继续提供服务。而哨兵模式可以实现自动化的系统监控和故障恢复功能。
哨兵模式是一种特殊的模式,首先Redis提供了哨兵的命令,哨兵是一个独立的进程,作为进程,它会独立运行。其原理是哨兵通过发送命令,等待Redis服务器响应,从而监控运行的多个Redis实例。
哨兵的作用:
- 监控主服务器和从服务器是否正常运行。
- 主服务器出现故障时自动将从服务器转换为主服务器
故障切换(failover)过程:
假设主服务器宕机,哨兵1先检测到这个结果,系统并不会马上进行failover过程,仅仅是哨兵1主观的认为主服务器不可用,这个现象成为主观下线。当后面的哨兵也检测到主服务器不可用,并且数量达到一定值时,那么哨兵之间就会进行一次投票,投票的结果由一个哨兵发起,进行failover操作。切换成功后,就会通过发布订阅模式,让各个哨兵把自己监控的从服务器实现切换主机,这个过程称为客观下线。这样对于客户端而言,一切都是透明的。
哨兵除了监控服务器,哨兵之间也相互监控,如下图所示:
哨兵模式的优缺点
优点:
- 基于主动复制模式,主从复制模式的所有优点都有
- 主从可以自动切换,系统更健壮,可用性更高
缺点:
- 很难支持在线扩容,在线扩容复杂
三、Redis-Cluster集群
现在很多公司采用的是这种redis集群模式。
redis的哨兵模式基本已经可以实现高可用,读写分离 ,但是在这种模式下每台redis服务器都存储相同的数据,很浪费内存,所以在redis3.0上加入了cluster模式,实现的redis的分布式存储,也就是说每台redis节点上存储不同的内容。解决了前面哨兵模式扩容复杂的问题。
Cluster集群模式是在哨兵模式的基础上进行升级改造:
- 集群节点复制:遵循前面讲到的主从复制模式的节点复制方式
- 故障转移:和前面讲到的哨兵模式进行故障转移的方法基本一样,不同的是,在集群里面,故障转移是由集群中其他在线的主节点负责进行的,所以集群不必另外使用Redis Sentinel。
- 集群分片策略: 每台redis节点上存储不同的内容
Redis Cluster的具体实现细节:
采用了Hash槽的概念,集群会预先分配16384个槽,并将这些槽分配给具体的服务节点,通过对Key进行CRC16(key)%16384运算得到对应的槽是哪一个,从而将读写操作转发到该槽所对应的服务节点。当有新的节点加入或者移除的时候,再来迁移这些槽以及其对应的数据。在这种设计之下,我们可以很方便的进行动态扩容或缩容,目前很多公司都倾向于这种集群模式。
如下图所示:
面试不可怕,掌握真正的精髓可以让你一击即中。
更多学习过程中笔记源码分享
评论留言+转发文章+关注我后私信回复【Java】即可免费获取我准备好的面试文档资料!
相关推荐
- 互联网开发工程师技能图谱
-
互联网开发工程师需掌握多维度技术栈,涵盖前端交互、后端逻辑、数据库管理及系统运维,以下为核心学习路径。一、前端开发:构建用户交互界面基础三件套:HTML定义网页结构,CSS控制样式布局,JavaScr...
- Java高并发解决方案:轻松应对海量请求
-
Java高并发解决方案:轻松应对海量请求在当今互联网时代,高并发问题已经成为每个Java开发者绕不开的话题。无论是电商平台的大促活动,还是社交平台的热门话题讨论,都可能瞬间产生海量请求。那么,我们该如...
- 985毕业工作一年,腾讯试水一面连环50问,瞬间表示怀疑人生了.
-
背景985毕业至今刚好一年,我曾做过两三个月的测试感觉不是很合适,后面选择从事后端开发,还挺香。现在已经进入秋招的提前批了,想着去大厂试试水,就去了腾讯,整个一面下来我整个人都傻了,表示怀疑人生......
- Java找工作,项目经历写得差=白送offer!快改这些错误
-
Java找工作,项目经历写得差=白送offer!快改这些错误Java开发的兄弟们,有没有发现自己的简历投出去就像石沉大海?好不容易进了面试,却因为项目经历讲得磕磕绊绊,和offer失之交臂?明明辛辛苦...
- 又被问到了,java 面试题:如何优化高并发系统的性能?
-
针对高并发系统性能优化,可以从架构设计、代码实现、基础设施三个维度进行系统性优化。以下是分层解决方案:一、架构设计优化(核心战场)1.流量削峰策略异步消息队列:使用Kafka/RocketMQ承接瞬...
- 软件系统如何设计可扩展架构?方法论,Java实战代码
-
软件系统如何设计可扩展架构?方法论,Java实战代码,请关注,点赞,收藏。方法论那先想想方法论部分。扩展性架构的关键点通常包括分层、模块化、微服务、水平扩展、异步处理、缓存、负载均衡、分布式架构等等...
- 关系户进医院当老师,为啥进不了程序员圈子?3个扎心真相爆
-
关系户进医院当老师,为啥进不了程序员圈子?3个扎心真相爆肝整理!刷到邻居阿姨炫耀「侄女靠关系进了三甲医院当护士」,突然发现个怪事:**咋从没听说哪个程序员是靠走后门上岗的?**明明月薪3万+的高薪岗...
- Java面试总被项目问倒?这些被忽视的细节才是救命稻草!
-
Java面试总被项目问倒?这些被忽视的细节才是救命稻草!Java开发的兄弟姐妹们,找工作时是不是总感觉自己的项目经历像“塑料花”,看着好看,一细问就露馅?明明做过不少项目,面试时却被“技术选型为什么用...
- 分库分表是银弹吗?数据量到多少才该“动刀子”?
-
凌晨3点,某电商平台的数据库突然崩溃,只因一张订单表突破800万行,团队紧急开会讨论分库分表方案。但资深架构师的一句话让所有人沉默:“你们连业务流量都没分析,分库分表只会让系统死得更快!”本文将颠覆...
- 外卖系统开发全流程指南
-
开发一款完整的外卖系统需要整合订单管理、支付结算、配送调度等核心模块。以下是关键开发步骤与技术要点。一、系统架构设计基础模块划分用户端(小程序/APP)商家管理后台骑手调度系统平台运营中台技术选型建议...
- 保司核心系统——万亿级保单背后的数据分库设计
-
在构建保险核心系统时,工程师必须像设计分布式数据库般进行数据分层治理。我们通过五大解耦策略实现系统弹性伸缩:冷热数据分层存储突发性场景险种如同缓存中的热数据,80%的请求集中在20%时间段。这类短周期...
- 面试官:谈谈你对分库分表的理解?
-
面试官:谈谈你对分库分表的理解?这个问题在数据库优化中挺常见的。首先,我得回忆一下分库分表的基本概念和应用场景。分库分表主要是为了解决数据库的性能瓶颈,比如单库单表数据量过大导致的查询慢、写入慢等问题...
- 分库分表实战(第1期):一叶知秋——图览分库分表外卖订单项目
-
前言各位读者朋友,大家好,这是分库分表实战的第一篇文章,首先介绍一下”基于ShardingSphere的分库分表实战“的设计思路及内容。本实战的重点是分库分表实战,比较适合1~3年工作经验的程序...
- 实际应用中MySQL分库分表实践总结原理
-
实际应用中MySQL分库分表实践总结原理互联网系统需要处理大量用户的请求。比如微信日活用户破10亿,海量的用户每天产生海量的数量;美团外卖,每天都是几千万的订单,那这些系统的用户表、订单表、交易流水表...
- 你必须懂的Redis十大应用场景
-
Redis作为一款高性能的键值存储数据库,在互联网业务中有着广泛的应用。今天,我们就来详细盘点一下Redis的十大常用业务场景,并附上Golang的示例代码和简图,帮助大家更好地理解和应用Redis。...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- oracle位图索引 (63)
- oracle批量插入数据 (62)
- oracle事务隔离级别 (53)
- oracle 空为0 (50)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)