Redis数据结构及对象(redis五种数据结构及使用场景)
mhr18 2024-10-31 13:23 20 浏览 0 评论
1. 概述
根据《Redis设计与实现》一书,总结下Redis底层数据结构和对象类型。日常工作中,我们直接使用的是对象,但每种对象至少对应一种底层数据结构,不同使用场景,可以为对象设置不同数据结构,从而优化使用效率。
2. 数据结构
2.1. 简单动态字符(简称SDS)
2.1.1. 结构与实现
由已使用长度、空闲长度、字节数组组成:
每个sds.h/sdshdr结构表示一个SDS值:
struct sdshdr{
//记录buf数组中已使用字节的数量
int len;
//记录buf数组中未使用字节的数量
int free;
//字节数组,用于保存字符串
char buf[];
}
2.1.2. 特性
1) 避免发送缓冲区溢出
当需要对SDS进行就修改时,API会先检查SDS的空间,如不满足,会自动将空间扩展至执行修改所需的大小;
2) 减少内存分配次数
空间预分配,当进行空间扩展时,不仅会为SDS分片修改所必须的空间,还会分配额外的未使用空间;预分配可以减少连续执行字符串增长操作所需的内存重分配次数;
3) 惰性释放空间
当字符串长度缩短时,并不是立即使用内存重分配来回收缩短后的字节空间,而是使用free属性,将这些字节的数量记录下来,将来要扩容的话,这些未使用的空间就可能派上用场,避免频繁扩缩容,当然底层也提供了真正释放SDS未使用空间的API,不用担心惰性空间释放策略造成内存浪费;
2.2. 链表
作为常用的数据结构,链表一般出现在高级语言中,Redis使用C语言编写,没有这种数据结构,所以Redis自己构建了这种数据结构;
2.2.1. 结构与实现
链表和链表节点,使用adlist.h/list来表示链表,使用adlist.h/listNode结构来标识链表节点,
下图是由一个list结构和三个listNode结构组成的链表:
2.2.2. 应用范围
链表在Redis中的应用广泛,列表键的底层实现之一就是链表。当一个列表键元素数量较多,又或者列表中包含的元素都是比较长的字符串时,Redis就会使用链表作为列表键的底层实现。
2.2.3. 特性
1) 链表被广泛用于实现Redis的各种功能,比如列表键、发布与订阅、慢查询、监视器等;
2) 每个链表节点由一个listNode结构来表示,每个节点都有一个指向前置节点和后置节点的指针,所以Redis的链表实现是双端链表;
3) 每个链表使用一个list结构来表示,这个结构带有表头节点指针、表尾节点指针,以及链表长度等信息;
4) 因为链表表头节点的前置节点和表尾节点的后置节点都指向NULL,所以Redis的链表实现是无环链表;
5) 通过为链表设置不同的类型特定函数,Redis的链表可以用于保存各种不同类型的值。
2.3. 字典
字典可以理解为java中的map结构,一个键(key)可以和一个值(value)进行关联(或者说将键映射为值),这些关联的键和值就称为键值对。
2.3.1. 结构与实现
字典由dict.h/dict结构表示:
字典所使用的哈希表由dict.h/dictht结构定义:
一个完整的字典结构:
2.3.2. 应用范围
Redis的数据库就是使用字典来作为底层实现的,对数据库的增、删、查、改操作也是构建在对字典的操作之上的。
2.4. 跳跃表
2.4.1. 结构与实现
跳跃表(skiplist)是一种有序数据结构,它通过在每个节点中维持多个指向其他节点的指针,从而达到快速访问节点的目的
跳跃表由zskiplist和zskiplistNode两个结构组成,其中在skiplist用于保持跳表信息,如表头节点、表尾节点、长度;zskiplistNode包括层、分值、值对象;
2.4.2. 应用范围
应用于有序集合建和集群节点中内部数据结构。
2.5. 整数集合
2.5.1. 结构与实现
整数集合由intset实现,包括编码方式、元素数量、保存的元素数组;
每个intset.h/intset结构表示一个整数集合:
整数集合数据样例:
2.5.2. 应用范围
当一个集合只包含整数值元素,并且这个集合的元素数量不多时,Redis就会使用整数集合作为集合键的底层实现;
2.6. 压缩列表
2.6.1. 结构与实现
压缩列表,是由一系列特殊编码的连续内存块组成的顺序型数据结构。由压缩列表和压缩列表节点构成,包括压缩列表总长度、距离尾节点偏移量、列表节点;压缩列表节点由前一个节点的length、encoding、content三部分组成;
2.6.2. 应用范围
压缩列表用是列表建和哈希建的底层实现之一。
2.6.3. 特点
1) 压缩列表是一种为节约内存而开发的顺序型数据结构;
2) 压缩列表可以包含多个节点,每个节点可以保存一个字节数组或一个整数值;
3) 添加或删除节点时,可能引起连锁更新,但出现几率并不高;
3. 对象类型
Redis并没有直接使用上面这些数据结构来实现键值对数据库,而是基于这些数据结构创建了一个对象系统,这个系统包含字符串对象、列表对象、哈希对象、集合对象和有序集合对象这五种类型的对象,每种对象都用到了至少一种数据结构。
Redis中每个对象都由一个redisObject结构标识,结构中和保存数据有关的三个属性为type属性、encoding属性、ptr属性;
type属性记录了对象的类型:
encoding属性记录了对象所使用的编码:
不同对象类型和底层数据结构的对应:
4. 总结
1) 当称呼一个键为“字符串键”时,是指这个数据库键对应的值为字符串对象,当称呼一个键为“列表键”时,是指这个数据库键对应的值为列表对象;因为Redis中所有的key都为字符串,不用强调key的类型;
2) 通过encoding属性来设定对象所使用的编码,而不是为特定类型的对象关联一种固定的编码,极大地提升了Redis的灵活性和效率,因为Redis可以根据不同的使用场景来为一个对象设置不同的编码,从而优化对象在某一场景下的效率。
举个例子:
在列表对象包含的元素比较少时,Redis使用压缩列表作为列表对象的底层实现:因为压缩列表比双端链表更节约内存,并且在元素数量较少时,在内存中以连续块方式保存的压缩列表比起双端链表可以更快被载入到缓存中;随着列表对象包含的元素越来越多,使用压缩列表来保存元素的优势逐渐消失时,对象就会将底层实现从压缩列表转向功能更强、也更适合保存大量元素的双端链表上面;
相关推荐
- 几种 TCP 连接中出现 RST 的情况
-
现在是一个网络时代了。应该不少程序员在编程中需要考虑多机、局域网、广域网的各种问题。所以网络知识也是避免不了学习的。而且笔者一直觉得TCP/IP网络知识在一个程序员知识体系中必需占有一席之地的。在...
- Redis连接使用报RDB error错误
-
该错误信息:Errorinexecution;nestedexceptionisio.lettuce.core.RedisCommandExecutionException:MISC...
- lua 语法介绍与 NGINX lua 高级用法实战操作
-
一、概述lua是一种轻量小巧的脚本语言,用标准C语言编写并以源代码形式开放,其设计目的是为了嵌入应用程序中,从而为应用程序提供灵活的扩展和定制功能。官网:https://www.lua.org/二、l...
- Python教程——20.协程 - 2
-
异步编程asyncio.Future对象Task继承Future,Task对象内部中的await结果的处理基于Future对象来的在Future对象中会保存当前执行的这个协程任务的状态,如果当...
- “我的足迹”、“浏览历史”,Redis如何快速记录与展示?
-
咱们在网上“买买买”、“逛逛逛”的时候,总会留下各种各样的“足迹”。无论是电商APP里你最近浏览过的商品,视频网站上你刚刚看过的剧集,还是新闻客户端里你点开过的文章……这些“历史记录”,有时候还真挺有...
- 你手机上的“消息推送”,Redis可能参与其中
-
手机上那些时不时就“叮咚”一下的消息推送,确实是咱们数字生活里不可或缺的一部分。这篇咱们就来聊聊,Redis这位“消息灵通人士”,是如何在这场“信息接力赛”中大显身手,确保那些重要的、有趣的通知,能够...
- 短视频APP的“附近的人”,Redis如何快速匹配?
-
刷短视频,除了看各种搞笑段子、才艺展示,有时候是不是也想看看“同城”或者“附近”的人都在发些啥有意思的内容?或者,平台也会时不时地给你推荐一些“附近正在直播”的主播,让你感觉一下子拉近了和这个虚拟世界...
- 微信朋友圈的点赞、评论,Redis在背后默默付出
-
微信朋友圈,这片小小的“自留地”,承载了我们多少喜怒哀乐、生活点滴啊!一张精心修饰的照片,一段随感而发的文字,发出去之后,最期待的是什么?那必须是屏幕下方不断冒出来的小红心和一条条真诚(或者商业互吹)...
- 网站登录老是掉线?Redis帮你记住你是谁!
-
有没有过这样的糟心体验?你好不容易登录了一个网站,刚看了两篇帖子,或者购物车里刚加了几件宝贝,结果一刷新页面,或者稍微离开了一会儿,回来就发现——“哎?我怎么又退出了?!”又得重新输入用户名、密码、...
- 你常用的APP,哪些地方可能用到了Redis?(猜想与分析)
-
咱们现在的生活,简直是离不开各种各样的手机APP了!从早上睁眼刷新闻,到中午点外卖,再到晚上刷短视频、玩游戏,一天到头,指尖在屏幕上就没停过。这些APP为了让我们用得爽、用得顺心,背后可是使出了浑身解...
- Redis是啥?为啥程序员天天挂嘴边?小白也能看懂!
-
这Redis到底是何方神圣?为啥那些天天在电脑前敲代码的程序员小哥哥小姐姐们,老是把它挂在嘴边,好像离了它地球都不转了似的?别担心,咱们今天不说那些听了就头大的代码和术语,就用大白话,保证你听完一拍大...
- 面试官:请你说说Redis为什么这么快?
-
1)Redis是基于内存的存储数据库,绝大部分的命令处理只是纯粹的内存操作,内存的读写速度非常快。2)Redis是单进程线程的服务(实际上一个正在运行的RedisServer肯定不止一个线程,但只有...
- 有了强大的关系型数据库,为什么还需要Redis?
-
在数字世界的浩瀚海洋中,关系型数据库,例如我们熟知的MySQL、PostgreSQL或Oracle,无疑是那些承载着核心业务数据、坚如磐石的“国家图书馆”或“银行金库”。它们以严谨的结构、强大的事务处...
- Java 中间件数据可靠性串讲:从 MQ 、MySQL、Redis 不丢失的保障之道
-
引言在现代分布式系统中,中间件扮演着至关重要的角色,它们是构建高可用、高性能、高可扩展应用架构的基石。消息队列(MQ)、数据库(如MySQL)、缓存(如Redis)等是其中最具代表性的组件。然而,...
- 运维部署方式之——虚机部署
-
标准化使用作業系统:LinuxCentOS7自动化方式通过Ansible系统初始化playbook来管理。目的系统初始化工作是一个简单、繁复的工作,从云网得到的虚拟主机只是一个基础的系统环境,...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- oracle位图索引 (63)
- oracle批量插入数据 (62)
- oracle事务隔离级别 (53)
- oracle 空为0 (50)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)