数字化与智能化技术:分布式缓存数据库Redis
mhr18 2024-11-08 12:11 24 浏览 0 评论
一、Redis概述
Redis远程字典服务(Remote Dictionary Server ),是一个开源的使用ANSI C语言编写的,基于内存的分布式缓存Key-Value数据库。
1、Redis数据的基本读写操作
读数据:
(1)根据key从缓存中读取数据,
(2)如果缓存中没有,则根据key到数据库中查找
(3)读取到值之后,更相信缓存
写数据:
(1)根据key值写数据库
(2)根据key更新缓存
2、Redis和MemCached对比
Redis和MemCached都是分布式缓存数据库,它们的对比如下表所示。
3、Redis数据类型
Redis的数据类型有String(字符串),List(列表),Set(集合)等,详细请见下表。
4、Redis数据淘汰策略
redis是个基于内存的缓存数据库,既然是基于内存的,那肯定就会有存满的时候,所以需要淘汰一定的数据,其淘汰策略如下表所示。
4、Redis数据持久化策略
redis提供了两种不同的持久化策略RDB and AOF。RDB全称Redis DataBase,是在指定时间间隔内将内存的数据集快照写到磁盘,也就是snapshot快照;AOF是传统数据库日志的思想,它将redis执行过的所有写指令记录下来,只允许追加文件但不可以改写文件,redis重启之后会读取该文件重新构建数据。两种方式的对比如下表所示。
二、Redis 的集群模式
1、Redis集群发展过程简介
集群最开始为简单的主从模式,它的问题是一旦master节点出现问题,则需要人为手动的将slave节点切换成为maser节点。
为解决主从模式的不足引入了哨兵模式,这种模式在master节点出现故障后,能够自动将salve节点提升成master节点,不需要人工干预。
但上述模式都没有达到真正的数据共享的存储,每个redis实例中存储的都是全量数据,所以Redis Cluster就诞生了,实现了真正数据的分区分片存储。但是由于集群方式在2015年才发布正式版,发布得比较晚,各大厂等不及了,先后开发了自己的redis数据分片集群模式如:Twemproxy、Codis等。
2、集群的模式示意图
(1)主从模式
(2)哨兵模式
(3)集群模式
集群模式详见后面的示意图。
三种方式的特点的描述如下表所示。
三、各个大厂开的Redis集群分片常见模式
各个大厂Redis集群分片常见方式如下表所示。
(1)客户端分片
客户端分片通过Redis客户端使用一致性哈希预先定义好的路由规则,把对Key的访问转发到不同的Redis实例中。
客户端分片的优缺点:使用hash一致性算法分片的好处是所有的逻辑都是可控的,不依赖于第三方分布式中间件。服务端的Redis实例彼此独立,可扩展性强。
客户端集群分片的示意图如下所示。
客户端分片缺点是当服务端Redis实例群拓扑结构有变化时,每个客户端都需要更新调整。如果能把客户端分片模块独立出来,形成一个单独的中间件,作为客户端和服务端连接的桥梁就能解决这个问题了,此时代理分片就出现了。
(2)中间件分片
Twemproxy中间件代理:Twemproxy代理通过代理层将多个Redis实例进行统一管理,客户端不需要关心后面有多少个Redis实例。通过Twemproxy中间件的代理,不需要改任何代码;自动删除无效Redis实例;减少客户端与Redis实例的连接数。Twemproxy缺点在于无法平滑地扩容和缩容,没有友好的监控管理界面,不利于运维管理;客户端请求需要经过中间的Twemproxy才能达到Redis,性能会有所损。
Twemproxy中间件代理示意图如下所示。
Codis是其基于Go和C语言开发的一个支持平滑增加Redis实例的中间件,示意图如下所示。
(3)Redis集群模式
redis在3.0以上引入了集群模式,其采用集群可以达到完全去中心化,所有的采用PING-PONG机制节点彼此互联,不需要中间代理层。客户端不需要连接集群所有节点,只连接集群中任何一个可用节点即可。其示意图如下所示。
名词解释:
Twemproxy
Twemproxy是一种代理分片机制,由Twitter开源。Twemproxy作为代理,可接受来自多个程序的访问,按照路由规则,转发给后台的各个Redis或memcached服务器,再原路返回。
Codis
Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别 (不支持的命令列表)。
四、Redis常见问题以及解决策略
下面笔者给大家收集了redis常见的一些问题以及对应的解决方案的资料,不见得全面,有精力的读者可自行补充,如下表所示。
相关推荐
- Java面试题及答案总结(2025版)
-
大家好,我是Java面试陪考员最近很多小伙伴在忙着找工作,给大家整理了一份非常全面的Java面试题及答案。涉及的内容非常全面,包含:Redis、Linux、SpringBoot、Spring、MySQ...
- Java面试题及答案最全总结(2025春招版)
-
大家好,我是Java面试分享最近很多小伙伴在忙着找工作,给大家整理了一份非常全面的Java面试题及答案。涉及的内容非常全面,包含:Spring、MySQL、JVM、Redis、Linux、Spring...
- Java面试题及答案最全总结(2025版持续更新)
-
大家好,我是Java面试陪考员最近很多小伙伴在忙着找工作,给大家整理了一份非常全面的Java面试题及答案。涉及的内容非常全面,包含:Spring、MySQL、JVM、Redis、Linux、Sprin...
- 蚂蚁金服面试题(附答案)建议收藏:经典面试题解析
-
前言最近编程讨论群有位小伙伴去蚂蚁金服面试了,以下是面试的真题,跟大家一起来讨论怎么回答。点击上方“捡田螺的小男孩”,选择“设为星标”,干货不断满满1.用到分布式事务嘛?为什么用这种方案,有其他方案...
- 测试工程师面试必问的十道题目!全答上来的直接免试
-
最近参加运维工程师岗位的面试,笔者把自己遇到的和网友分享的一些常见的面试问答收集整理出来了,希望能对自己和对正在准备面试的同学提供一些参考。一、Mongodb熟悉吗,一般部署几台?部署过,没有深入研究...
- 10次面试9次被刷?吃透这500道大厂Java高频面试题后,怒斩offer
-
很多Java工程师的技术不错,但是一面试就头疼,10次面试9次都是被刷,过的那次还是去了家不知名的小公司。问题就在于:面试有技巧,而你不会把自己的能力表达给面试官。应届生:你该如何准备简历,面试项目和...
- java高频面试题整理
-
【高频常见问题】1、事务的特性原子性:即不可分割性,事务要么全部被执行,要么就全部不被执行。一致性或可串性:事务的执行使得数据库从一种正确状态转换成另一种正确状态隔离性:在事务正确提交之前,不允许把该...
- 2025 年最全 Java 面试题,京东后端面试面经合集,答案整理
-
最近京东搞了个TGT计划,针对顶尖青年技术天才,直接宣布不设薪资上限。TGT计划面向范围包括2023年10月1日到2026年9月30日毕业的海内外本硕博毕业生。时间范围还...
- idGenerator测评
-
工作中遇到需要生成随机数的需求,看了一个个人开发的基于雪花算法的工具,今天进行了一下测评(测试)。idGenerator项目地址见:https://github.com/yitter/IdGenera...
- 2024年开发者必备:MacBook Pro M1 Max深度体验与高效工作流
-
工作机器我使用的是一台16英寸的MacBookProM1Max。这台电脑的表现堪称惊人!它是我用过的最好的MacBook,短期内我不打算更换它。性能依然出色,即使在执行任务时也几乎听不到风扇的...
- StackOverflow 2022 年度调查报告
-
一个月前,StackOverflow开启了2022年度开发者调查,历时一个半月,在6月22日,StackOverflow正式发布了2022年度开发者调查报告。本次报告StackO...
- 这可能是最全面的SpringDataMongoDB开发笔记
-
MongoDB数据库,在最近使用越来越广泛,在这里和Java的开发者一起分享一下在Java中使用Mongodb的相关笔记。希望大家喜欢。关于MongoDB查询指令,请看我的上一篇文章。SpringD...
- Mac M2 本地部署ragflow
-
修改配置文件Dockerfile文件ARGNEED_MIRROR=1//开启国内镜像代理docker/.envREDIS_PORT=6380//本地redis端口冲突RAGFLOW_IMA...
- 别再傻傻分不清!localhost、127.0.0.1、本机IP,原来大有讲究!
-
调试接口死活连不上?部署服务队友访问不了?八成是localhost、127.0.0.1、本机IP用混了!这三个看似都指向“自己”的东西,差之毫厘谬以千里。搞不清它们,轻则调试抓狂,重则服务裸奔。loc...
- 我把 Mac mini 托管到机房了:一套打败云服务器的终极方案
-
我把我积灰的Macmini托管到机房了,有图有真相。没想到吧?一台在家吃灰的苹果电脑,帮我省了大钱!对,就是控制了自己的服务器,省了租用云服务器的钱,重要数据还全捏在自己手里,这感觉真爽。你可...
你 发表评论:
欢迎- 一周热门
-
-
Redis客户端 Jedis 与 Lettuce
-
高并发架构系列:Redis并发竞争key的解决方案详解
-
redis如何防止并发(redis如何防止高并发)
-
Java SE Development Kit 8u441下载地址【windows版本】
-
开源推荐:如何实现的一个高性能 Redis 服务器
-
redis安装与调优部署文档(WinServer)
-
Redis 入门 - 安装最全讲解(Windows、Linux、Docker)
-
一文带你了解 Redis 的发布与订阅的底层原理
-
Redis如何应对并发访问(redis控制并发量)
-
Oracle如何创建用户,表空间(oracle19c创建表空间用户)
-
- 最近发表
- 标签列表
-
- oracle位图索引 (74)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (59)
- oracle主从同步 (56)
- oracle 乐观锁 (53)
- redis 命令 (83)
- php redis (97)
- redis 存储 (67)
- redis 锁 (74)
- 启动 redis (73)
- redis 时间 (60)
- redis 删除 (69)
- redis内存 (64)
- redis并发 (53)
- redis 主从 (71)
- redis同步 (53)
- redis结构 (53)
- redis 订阅 (54)
- redis 登录 (62)
- redis 面试 (58)
- redis问题 (54)
- 阿里 redis (67)
- redis的缓存 (57)
- lua redis (59)
- redis 连接池 (64)