图解Redis-Sentinel(哨兵)实现(redis哨兵机制原理)
mhr18 2024-10-26 10:54 21 浏览 0 评论
Sentinel(哨兵)是Redis高可用的解决方案之一,由一个或者多个Sentinel实例组成的系统可以监视任意个主服务器及从服务器组成的集群,当某个主服务器不在线时,Sentinel会主动将下线的主服务器下的从服务器升级为主服务器继续提供服务。
Sentinel模式架构
Sentinel常见的架构如下:
- Sentinel集群与Redis主从集群通过ping-pong心跳进行验活。
- 当检测到Master失效后,Sentinel会将失活的Master对应的Slave升级为Master,并更新Proxy的路由表。
- Sentinel本身也是一个集群,集群内的所有实例之间相互会有心跳,保证Sentinel集群自身的可靠性。
Sentinel实现原理
Sentinel启动流程如下:
- 初始化服务器。
- 将普通Redis服务器的代码替换为Sentinel专用代码。
- 初始化Sentinel状态。
- 跟进配置文件sentinel.conf初始化Sentinel的监视主服务器列表。
- 创建连向主服务器的网络连接。
Sentinel初始化
Sentinel初始化服务器
Sentinel本质上只是一个运行在特殊模式下的Redis服务器,因此启动Sentinel也就是初始化一个普通的Redis服务器,但是启动的模式与普通服务器不一致:
- redisServer中的commands在Sentinel模式下会被替换为sentinelcmds。
- Sentinel模式启动阶段不会载入RDB文件或者AOF文件初始化数据库。
初始化Sentinel状态
Sentinel启动时根据配置文件初始化masters节点的配置,具体结构如下:
与主服务器建立连接
Sentinel向主服务器建立连接,Sentinel作为服务器的客户端,可以向主服务器发送命令,从恢复中获取主服务相关信息。Sentinel会与主服务器建立两个连接:
- 命令连接:专门用于向主服务发送命令,并接受命令回复。
- 订阅连接:专门用于订阅主服务器的__sentinel__:hello频道。
Sentinel与主/从服务器通信
Sentinel默认会以没10s一次的频率通过命令连接向主服务器发送INFO命令,通过这个命令的响应,Sentinel可以用获取到主服务的信息以及其对应的从服务器信息,然后将这些信息更新到对应的masters->sentinelRedisInstance#slaves结构中。
通过主服务获取到从服务器信息后,Sentinel也会和从服务器默认没10s通信一次,也是通过INFO命令获取从服务器信息,然后将回复数据更新到对应的从服务器结构中。
Sentinel与主/从服务器的频道消息
Sentinel默认会以2s一次的频率向主服务__sentinel__:hello频道发送PUSH命令,该命令包含当前Sentinel的基本信息已经订阅的主服务器信息。同时__sentinel__:hello频道产生消息时,主服务、所有订阅该频道的从服务器(包括发送这条消息的Sentinel服务器),都会接收到这条频道消息,收到这条消息的Sentinel服务器(发送这条消息的Sentinel服务器可以通过消息内的信息过滤掉这条消息)会讲信息更新到对应的masters->sentinelRedisInstance#sentinels结构中。
通过频道消息获取到集群其它的Sentinel后,Sentinel将会与其它连接同一个主服务的Sentinel建立命令连接,通过该命令连接可以交换Sentinel之间的信息。最终的连接示意图如上:哨兵模式。
主观/客观下线检测
Sentinel会以每秒一次的频率向所有建立连接的实例(主从服务器及其它Sentinel)发送PING命令,通过这个命令回复来判断响应方是否在线,如果在指定的时间内连续多次返回无效响应(除+PONG、-LOADING、-MASTERDOWN这三种回复以外的其他任何响应或者无响应),则会将实例对应的状态flags标记为SRI_S_SOWN,即主观下线状态。
当Sentinel判断主服务器为主观下线状态后,Sentinel会将SENTINEL is-master-sown-by-addr命令发送给其它所有Sentinel,其它Sentinel接收到命令后会检查对应主服务状态并返回主服务的状态及配置纪元,接收到各个响应后Sentinel会判断响应中标记为下线的响应数量,如果超过quorum的值,则将会把主服务器标记位客观下线状态。
故障转移
当一个主服务器下线后,Sentinel集群首先会选举出一个领头的来做故障转移,选主的过程是基于Raft算法(Raft算法演示:http://thesecretlivesofdata.com/raft/),基本思想就是最先得到半数以上的选票的Sentinel将成为领头Sentinel。
选举出领头Sentinel后,其将对已下线的服务器进行故障转移操作,具体步骤如下:
- 在已下线的主服务对应的从服务器中,选择其中一个将其转换为主服务器。
- 将其它的从服务器的复制关系改为新的主服务器。
- 将已下线的服务器变为从服务器,当其恢复后会作为一个从服务器从而不会影响现有运行的主从集群。
如何选出新的主服务器
领头的Sentinel会将所有的从服务器保存到一个列表,然后通过以下规则来进行过滤:
- 删除列表中所有失效的从服务器,只保留健康的。
- 删除列表中所有近5s没有回复领头Sentinel的INFO命令的从服务器。
- 删除列表中最先与原主服务器断连的从服务器(断连时间大于down-after-milliseconds*10 ms的),为了保证从服务器数据尽可能最新。
- 判断剩余从服务器的优先级,排序取最高的。
- 如果多个从服务器优先级相同,则选择复制偏移量最大的。
- 若还是有多个则选择runid最小的从服务器。
转换各服务器主从订阅关系
当新的主服务器选举成功后,领头Sentinel将首先对其发送SLAVEOF no one命令,然后会每秒一次的频率发送INFO命令,通过命令的回复中角色(role:master)的变化信息来判断被选中的从服务器是否成功变更为主服务器。
下一步,领头Sentinel将会通过SLAVEOF <master ip:port>命令发送给所有的从服务器,该命令将更换所有从服务器的订阅关系。
最后,领头Sentinel会在旧的master重新连线后将其更新为新主服务器的从服务器。
至此,整个故障转移过程结束。
以上就是Redis Sentinel的介绍,如果各位还想了解更多,欢迎转发+关注+评论,Redis图解系列专栏持续更新中。
相关推荐
- 如何检查 Linux 服务器是物理服务器还是虚拟服务器?
-
在企业级运维、故障排查和性能调优过程中,准确了解服务器的运行环境至关重要。无论是物理机还是虚拟机,都存在各自的优势与限制。在很多场景下,尤其是当你继承一台服务器而不清楚底层硬件细节时,如何快速辨识它是...
- 第四节 Windows 系统 Docker 安装全指南
-
一、Docker在Windows上的运行原理(一)架构限制说明Docker本质上依赖Linux内核特性(如Namespaces、Cgroups等),因此在Windows系统上无法直...
- C++ std:shared_ptr自定义allocator引入内存池
-
当C++项目里做了大量的动态内存分配与释放,可能会导致内存碎片,使系统性能降低。当动态内存分配的开销变得不容忽视时,一种解决办法是一次从操作系统分配一块大的静态内存作为内存池进行手动管理,堆对象内存分...
- Activiti 8.0.0 发布,业务流程管理与工作流系统
-
Activiti8.0.0现已发布。Activiti是一个业务流程管理(BPM)和工作流系统,适用于开发人员和系统管理员。其核心是超快速、稳定的BPMN2流程引擎。Activiti可以...
- MyBatis动态SQL的5种高级玩法,90%的人只用过3种
-
MyBatis动态SQL在日常开发中频繁使用,但大多数开发者仅掌握基础标签。本文将介绍五种高阶技巧,助你解锁更灵活的SQL控制能力。一、智能修剪(Trim标签)应用场景:动态处理字段更新,替代<...
- Springboot数据访问(整合Mybatis Plus)
-
Springboot整合MybatisPlus1、创建数据表2、引入maven依赖mybatis-plus-boot-starter主要引入这个依赖,其他相关的依赖在这里就不写了。3、项目结构目录h...
- 盘点金州勇士在奥克兰13年的13大球星 满满的全是...
-
见证了两个月前勇士与猛龙那个史诗般的系列赛后,甲骨文球馆正式成为了历史。那个大大的红色标志被一个字母一个字母地移除,在周四,一切都成为了过去式。然而这座,别名为“Roaracle”(译注:Roar怒吼...
- Mybatis入门看这一篇就够了(mybatis快速入门)
-
什么是MyBatisMyBatis本是apache的一个开源项目iBatis,2010年这个项目由apachesoftwarefoundation迁移到了googlecode,并且改名为M...
- Springboot数据访问(整合druid数据源)
-
Springboot整合druid数据源基本概念SpringBoot默认的数据源是:2.0之前:org.apache.tomcat.jdbc.pool.DataSource2.0及之后:com.z...
- Linux 中的 "/etc/profile.d" 目录有什么作用 ?
-
什么是/etc/profile.d/目录?/etc/profile.d/目录是Linux系统不可或缺的一部分保留配置脚本。它与/etc/profile文件相关联,这是一个启动脚本,该脚...
- 企业数据库安全管理规范(企业数据库安全管理规范最新版)
-
1.目的为规范数据库系统安全使用活动,降低因使用不当而带来的安全风险,保障数据库系统及相关应用系统的安全,特制定本数据库安全管理规范。2.适用范围本规范中所定义的数据管理内容,特指存放在信息系统数据库...
- Oracle 伪列!这些隐藏用法你都知道吗?
-
在Oracle数据库中,有几位特殊的“成员”——伪列,它们虽然不是表中真实存在的物理列,但却能在数据查询、处理过程中发挥出意想不到的强大作用。今天给大家分享Oracle伪列的使用技巧,无论...
- Oracle 高效处理数据的隐藏神器:临时表妙用
-
各位数据库搬砖人,在Oracle的代码世界里闯荡,处理复杂业务时,是不是总被数据“搅得头大”?今天给大家安利一个超实用的隐藏神器——临时表!当你需要临时存储中间计算结果,又不想污染正式数据表...
- Oracle 数据库查询:多表查询(oracle多表关联查询)
-
一、多表查询基础1.JOIN操作-INNERJOIN:返回两个表中满足连接条件的匹配行,不保留未匹配数据。SELECTa.emp_id,b.dept_nameFROMempl...
- 一文掌握怎么利用Shell+Python实现多数据源的异地备份程序
-
简介:在信息化时代,数据安全和业务连续性已成为企业和个人用户关注的焦点。无论是网站数据、数据库、日志文件,还是用户上传的文档、图片等,数据一旦丢失,损失难以估量。尤其是当数据分布在多个不同的目录、服务...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- 如何检查 Linux 服务器是物理服务器还是虚拟服务器?
- 第四节 Windows 系统 Docker 安装全指南
- C++ std:shared_ptr自定义allocator引入内存池
- Activiti 8.0.0 发布,业务流程管理与工作流系统
- MyBatis动态SQL的5种高级玩法,90%的人只用过3种
- Springboot数据访问(整合Mybatis Plus)
- 盘点金州勇士在奥克兰13年的13大球星 满满的全是...
- Mybatis入门看这一篇就够了(mybatis快速入门)
- Springboot数据访问(整合druid数据源)
- Linux 中的 "/etc/profile.d" 目录有什么作用 ?
- 标签列表
-
- oracle位图索引 (74)
- oracle基目录 (50)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (53)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)