百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

高工面试之:redis的几种集群方式你都熟悉吗?

mhr18 2024-10-26 10:47 26 浏览 0 评论

Redis三种集群方式:主从复制、哨兵模式和Cluster模式

一、主从复制模式

Redis配置成主从模式,主库(Master)只负责客户端的写数据,从库(Slave)只负责客户端的读数据。

主从数据复制过程如图所示:

主从复制原理:

  • slave redis连接master redis,发送sync命令;
  • master redis接收到sync命名后,执行BGSAVE命令生成RDB文件,使用缓冲区记录此后执行的所有写命令;
  • master redis BGSAVE执行完后,向所有slave redis发送快照文件,并在发送期间继续记录被执行的写命令;
  • slave redis收到快照文件后丢弃所有旧数据,载入收到的快照;
  • master redis快照发送完毕后开始向slave redis发送缓冲区中的写命令;
  • slave redis器完成对快照的载入,开始接收命令请求,并执行来自master redis缓冲区的写命令;
  • master redis每执行一个写命令就会向slave redis发送相同的写命令,slave redis接收并执行收到的写命令

主从复制优缺点:

优点:

  • 实现读写分离:客户端从master redis写数据,从slave redis读数据
  • 支持主从复制:master redis自动将数据同步到slave redis
  • Slave分载Master的同步压力:slave可以接受其它Slaves的连接和同步请求
  • Master Server是以非阻塞的方式为Slaves提供服务:在Master-Slave同步期间,客户端仍然可以提交查询或修改请求
  • Slave Server同样是以非阻塞的方式完成数据同步:在同步期间,如果有客户端提交查询请求,Redis则返回同步之前的数据

缺点:

  • 不具备自动容错和恢复功能:主机从机的宕机都会导致前端部分读写请求失败,需要等待机器重启或者手动切换前端的IP才能恢复;宕机前有部分数据未能及时同步到从机,切换IP后还会引入数据不一致的问题,降低了系统的可用性
  • 较难支持在线扩容:在集群容量达到上限时在线扩容会变得很复杂。

二、哨兵模式

哨兵模式:

在主从复制模式中当主服务器中断服务后,需要人工手动操作来将一个从服务器升级为主服务器,以便继续提供服务。而哨兵模式可以实现自动化的系统监控和故障恢复功能。

哨兵模式是一种特殊的模式,首先Redis提供了哨兵的命令,哨兵是一个独立的进程,作为进程,它会独立运行。其原理是哨兵通过发送命令,等待Redis服务器响应,从而监控运行的多个Redis实例。

哨兵的作用:

  • 监控主服务器和从服务器是否正常运行。
  • 主服务器出现故障时自动将从服务器转换为主服务器

故障切换(failover)过程:

假设主服务器宕机,哨兵1先检测到这个结果,系统并不会马上进行failover过程,仅仅是哨兵1主观的认为主服务器不可用,这个现象成为主观下线。当后面的哨兵也检测到主服务器不可用,并且数量达到一定值时,那么哨兵之间就会进行一次投票,投票的结果由一个哨兵发起,进行failover操作。切换成功后,就会通过发布订阅模式,让各个哨兵把自己监控的从服务器实现切换主机,这个过程称为客观下线。这样对于客户端而言,一切都是透明的。

哨兵除了监控服务器,哨兵之间也相互监控,如下图所示:

哨兵模式的优缺点

优点:

  • 基于主动复制模式,主从复制模式的所有优点都有
  • 主从可以自动切换,系统更健壮,可用性更高

缺点:

  • 很难支持在线扩容,在线扩容复杂

三、Redis-Cluster集群

现在很多公司采用的是这种redis集群模式。

redis的哨兵模式基本已经可以实现高可用,读写分离 ,但是在这种模式下每台redis服务器都存储相同的数据,很浪费内存,所以在redis3.0上加入了cluster模式,实现的redis的分布式存储,也就是说每台redis节点上存储不同的内容。解决了前面哨兵模式扩容复杂的问题。

Cluster集群模式是在哨兵模式的基础上进行升级改造:

  • 集群节点复制:遵循前面讲到的主从复制模式的节点复制方式
  • 故障转移:和前面讲到的哨兵模式进行故障转移的方法基本一样,不同的是,在集群里面,故障转移是由集群中其他在线的主节点负责进行的,所以集群不必另外使用Redis Sentinel。
  • 集群分片策略: 每台redis节点上存储不同的内容

Redis Cluster的具体实现细节:

采用了Hash槽的概念,集群会预先分配16384个槽,并将这些槽分配给具体的服务节点,通过对Key进行CRC16(key)%16384运算得到对应的槽是哪一个,从而将读写操作转发到该槽所对应的服务节点。当有新的节点加入或者移除的时候,再来迁移这些槽以及其对应的数据。在这种设计之下,我们可以很方便的进行动态扩容或缩容,目前很多公司都倾向于这种集群模式。

如下图所示:


面试不可怕,掌握真正的精髓可以让你一击即中。

更多学习过程中笔记源码分享

评论留言+转发文章+关注我后私信回复【Java】即可免费获取我准备好的面试文档资料!


相关推荐

互联网开发工程师技能图谱

互联网开发工程师需掌握多维度技术栈,涵盖前端交互、后端逻辑、数据库管理及系统运维,以下为核心学习路径。一、前端开发:构建用户交互界面基础三件套:HTML定义网页结构,CSS控制样式布局,JavaScr...

Java高并发解决方案:轻松应对海量请求

Java高并发解决方案:轻松应对海量请求在当今互联网时代,高并发问题已经成为每个Java开发者绕不开的话题。无论是电商平台的大促活动,还是社交平台的热门话题讨论,都可能瞬间产生海量请求。那么,我们该如...

985毕业工作一年,腾讯试水一面连环50问,瞬间表示怀疑人生了.

背景985毕业至今刚好一年,我曾做过两三个月的测试感觉不是很合适,后面选择从事后端开发,还挺香。现在已经进入秋招的提前批了,想着去大厂试试水,就去了腾讯,整个一面下来我整个人都傻了,表示怀疑人生......

Java找工作,项目经历写得差=白送offer!快改这些错误

Java找工作,项目经历写得差=白送offer!快改这些错误Java开发的兄弟们,有没有发现自己的简历投出去就像石沉大海?好不容易进了面试,却因为项目经历讲得磕磕绊绊,和offer失之交臂?明明辛辛苦...

又被问到了,java 面试题:如何优化高并发系统的性能?

针对高并发系统性能优化,可以从架构设计、代码实现、基础设施三个维度进行系统性优化。以下是分层解决方案:一、架构设计优化(核心战场)1.流量削峰策略异步消息队列:使用Kafka/RocketMQ承接瞬...

软件系统如何设计可扩展架构?方法论,Java实战代码

软件系统如何设计可扩展架构?方法论,Java实战代码,请关注,点赞,收藏。方法论那先想想方法论部分。扩展性架构的关键点通常包括分层、模块化、微服务、水平扩展、异步处理、缓存、负载均衡、分布式架构等等...

关系户进医院当老师,为啥进不了程序员圈子?3个扎心真相爆

关系户进医院当老师,为啥进不了程序员圈子?3个扎心真相爆肝整理!刷到邻居阿姨炫耀「侄女靠关系进了三甲医院当护士」,突然发现个怪事:**咋从没听说哪个程序员是靠走后门上岗的?**明明月薪3万+的高薪岗...

Java面试总被项目问倒?这些被忽视的细节才是救命稻草!

Java面试总被项目问倒?这些被忽视的细节才是救命稻草!Java开发的兄弟姐妹们,找工作时是不是总感觉自己的项目经历像“塑料花”,看着好看,一细问就露馅?明明做过不少项目,面试时却被“技术选型为什么用...

分库分表是银弹吗?数据量到多少才该“动刀子”?

凌晨3点,某电商平台的数据库突然崩溃,只因一张订单表突破800万行,团队紧急开会讨论分库分表方案。但资深架构师的一句话让所有人沉默:“你们连业务流量都没分析,分库分表只会让系统死得更快!”本文将颠覆...

外卖系统开发全流程指南

开发一款完整的外卖系统需要整合订单管理、支付结算、配送调度等核心模块。以下是关键开发步骤与技术要点。一、系统架构设计基础模块划分用户端(小程序/APP)商家管理后台骑手调度系统平台运营中台技术选型建议...

保司核心系统——万亿级保单背后的数据分库设计

在构建保险核心系统时,工程师必须像设计分布式数据库般进行数据分层治理。我们通过五大解耦策略实现系统弹性伸缩:冷热数据分层存储突发性场景险种如同缓存中的热数据,80%的请求集中在20%时间段。这类短周期...

面试官:谈谈你对分库分表的理解?

面试官:谈谈你对分库分表的理解?这个问题在数据库优化中挺常见的。首先,我得回忆一下分库分表的基本概念和应用场景。分库分表主要是为了解决数据库的性能瓶颈,比如单库单表数据量过大导致的查询慢、写入慢等问题...

分库分表实战(第1期):一叶知秋——图览分库分表外卖订单项目

前言各位读者朋友,大家好,这是分库分表实战的第一篇文章,首先介绍一下”基于ShardingSphere的分库分表实战“的设计思路及内容。本实战的重点是分库分表实战,比较适合1~3年工作经验的程序...

实际应用中MySQL分库分表实践总结原理

实际应用中MySQL分库分表实践总结原理互联网系统需要处理大量用户的请求。比如微信日活用户破10亿,海量的用户每天产生海量的数量;美团外卖,每天都是几千万的订单,那这些系统的用户表、订单表、交易流水表...

你必须懂的Redis十大应用场景

Redis作为一款高性能的键值存储数据库,在互联网业务中有着广泛的应用。今天,我们就来详细盘点一下Redis的十大常用业务场景,并附上Golang的示例代码和简图,帮助大家更好地理解和应用Redis。...

取消回复欢迎 发表评论: