Redis数据结构及对象(redis五种数据结构及使用场景)
mhr18 2024-10-31 13:23 24 浏览 0 评论
1. 概述
根据《Redis设计与实现》一书,总结下Redis底层数据结构和对象类型。日常工作中,我们直接使用的是对象,但每种对象至少对应一种底层数据结构,不同使用场景,可以为对象设置不同数据结构,从而优化使用效率。
2. 数据结构
2.1. 简单动态字符(简称SDS)
2.1.1. 结构与实现
由已使用长度、空闲长度、字节数组组成:
每个sds.h/sdshdr结构表示一个SDS值:
struct sdshdr{
//记录buf数组中已使用字节的数量
int len;
//记录buf数组中未使用字节的数量
int free;
//字节数组,用于保存字符串
char buf[];
}
2.1.2. 特性
1) 避免发送缓冲区溢出
当需要对SDS进行就修改时,API会先检查SDS的空间,如不满足,会自动将空间扩展至执行修改所需的大小;
2) 减少内存分配次数
空间预分配,当进行空间扩展时,不仅会为SDS分片修改所必须的空间,还会分配额外的未使用空间;预分配可以减少连续执行字符串增长操作所需的内存重分配次数;
3) 惰性释放空间
当字符串长度缩短时,并不是立即使用内存重分配来回收缩短后的字节空间,而是使用free属性,将这些字节的数量记录下来,将来要扩容的话,这些未使用的空间就可能派上用场,避免频繁扩缩容,当然底层也提供了真正释放SDS未使用空间的API,不用担心惰性空间释放策略造成内存浪费;
2.2. 链表
作为常用的数据结构,链表一般出现在高级语言中,Redis使用C语言编写,没有这种数据结构,所以Redis自己构建了这种数据结构;
2.2.1. 结构与实现
链表和链表节点,使用adlist.h/list来表示链表,使用adlist.h/listNode结构来标识链表节点,
下图是由一个list结构和三个listNode结构组成的链表:
2.2.2. 应用范围
链表在Redis中的应用广泛,列表键的底层实现之一就是链表。当一个列表键元素数量较多,又或者列表中包含的元素都是比较长的字符串时,Redis就会使用链表作为列表键的底层实现。
2.2.3. 特性
1) 链表被广泛用于实现Redis的各种功能,比如列表键、发布与订阅、慢查询、监视器等;
2) 每个链表节点由一个listNode结构来表示,每个节点都有一个指向前置节点和后置节点的指针,所以Redis的链表实现是双端链表;
3) 每个链表使用一个list结构来表示,这个结构带有表头节点指针、表尾节点指针,以及链表长度等信息;
4) 因为链表表头节点的前置节点和表尾节点的后置节点都指向NULL,所以Redis的链表实现是无环链表;
5) 通过为链表设置不同的类型特定函数,Redis的链表可以用于保存各种不同类型的值。
2.3. 字典
字典可以理解为java中的map结构,一个键(key)可以和一个值(value)进行关联(或者说将键映射为值),这些关联的键和值就称为键值对。
2.3.1. 结构与实现
字典由dict.h/dict结构表示:
字典所使用的哈希表由dict.h/dictht结构定义:
一个完整的字典结构:
2.3.2. 应用范围
Redis的数据库就是使用字典来作为底层实现的,对数据库的增、删、查、改操作也是构建在对字典的操作之上的。
2.4. 跳跃表
2.4.1. 结构与实现
跳跃表(skiplist)是一种有序数据结构,它通过在每个节点中维持多个指向其他节点的指针,从而达到快速访问节点的目的
跳跃表由zskiplist和zskiplistNode两个结构组成,其中在skiplist用于保持跳表信息,如表头节点、表尾节点、长度;zskiplistNode包括层、分值、值对象;
2.4.2. 应用范围
应用于有序集合建和集群节点中内部数据结构。
2.5. 整数集合
2.5.1. 结构与实现
整数集合由intset实现,包括编码方式、元素数量、保存的元素数组;
每个intset.h/intset结构表示一个整数集合:
整数集合数据样例:
2.5.2. 应用范围
当一个集合只包含整数值元素,并且这个集合的元素数量不多时,Redis就会使用整数集合作为集合键的底层实现;
2.6. 压缩列表
2.6.1. 结构与实现
压缩列表,是由一系列特殊编码的连续内存块组成的顺序型数据结构。由压缩列表和压缩列表节点构成,包括压缩列表总长度、距离尾节点偏移量、列表节点;压缩列表节点由前一个节点的length、encoding、content三部分组成;
2.6.2. 应用范围
压缩列表用是列表建和哈希建的底层实现之一。
2.6.3. 特点
1) 压缩列表是一种为节约内存而开发的顺序型数据结构;
2) 压缩列表可以包含多个节点,每个节点可以保存一个字节数组或一个整数值;
3) 添加或删除节点时,可能引起连锁更新,但出现几率并不高;
3. 对象类型
Redis并没有直接使用上面这些数据结构来实现键值对数据库,而是基于这些数据结构创建了一个对象系统,这个系统包含字符串对象、列表对象、哈希对象、集合对象和有序集合对象这五种类型的对象,每种对象都用到了至少一种数据结构。
Redis中每个对象都由一个redisObject结构标识,结构中和保存数据有关的三个属性为type属性、encoding属性、ptr属性;
type属性记录了对象的类型:
encoding属性记录了对象所使用的编码:
不同对象类型和底层数据结构的对应:
4. 总结
1) 当称呼一个键为“字符串键”时,是指这个数据库键对应的值为字符串对象,当称呼一个键为“列表键”时,是指这个数据库键对应的值为列表对象;因为Redis中所有的key都为字符串,不用强调key的类型;
2) 通过encoding属性来设定对象所使用的编码,而不是为特定类型的对象关联一种固定的编码,极大地提升了Redis的灵活性和效率,因为Redis可以根据不同的使用场景来为一个对象设置不同的编码,从而优化对象在某一场景下的效率。
举个例子:
在列表对象包含的元素比较少时,Redis使用压缩列表作为列表对象的底层实现:因为压缩列表比双端链表更节约内存,并且在元素数量较少时,在内存中以连续块方式保存的压缩列表比起双端链表可以更快被载入到缓存中;随着列表对象包含的元素越来越多,使用压缩列表来保存元素的优势逐渐消失时,对象就会将底层实现从压缩列表转向功能更强、也更适合保存大量元素的双端链表上面;
相关推荐
- Java培训机构,你选对了吗?(java培训机构官网)
-
如今IT行业发展迅速,不仅是大学生,甚至有些在职的员工都想学习java开发,需求量的扩大,薪资必定增长,这也是更多人选择java开发的主要原因。不过对于没有基础的学员来说,java技术不是一两天就能...
- 产品经理MacBook软件清单-20个实用软件
-
三年前开始使用MacBookPro,从此再也不想用Windows电脑了,作为生产工具,MacBook可以说是非常胜任。作为产品经理,值得拥有一台MacBook。MacBook是工作平台,要发挥更大作...
- RAD Studio(Delphi) 本月隆重推出新的版本12.3
-
#在头条记录我的2025#自2024年9月,推出Delphi12.2版本后,本月隆重推出新的版本12.3,RADStudio12.3,包含了Delphi12.3和C++builder12.3最...
- 图解Java垃圾回收机制,写得非常好
-
什么是自动垃圾回收?自动垃圾回收是一种在堆内存中找出哪些对象在被使用,还有哪些对象没被使用,并且将后者删掉的机制。所谓使用中的对象(已引用对象),指的是程序中有指针指向的对象;而未使用中的对象(未引用...
- Centos7 初始化硬盘分区、挂载(针对2T以上)添加磁盘到卷
-
1、通过命令fdisk-l查看硬盘信息:#fdisk-l,发现硬盘为/dev/sdb大小4T。2、如果此硬盘以前有过分区,则先对磁盘格式化。命令:mkfs.文件系统格式-f/dev/sdb...
- 半虚拟化如何提高服务器性能(虚拟化 半虚拟化)
-
半虚拟化是一种重新编译客户机操作系统(OS)将其安装在虚拟机(VM)上的一种虚拟化类型,并在主机操作系统(OS)运行的管理程序上运行。与传统的完全虚拟化相比,半虚拟化可以减少开销,并提高系统性能。虚...
- HashMap底层实现原理以及线程安全实现
-
HashMap底层实现原理数据结构:HashMap的底层实现原理主要依赖于数组+链表+红黑树的结构。1、数组:HashMap最底层是一个数组,称为table,它存放着键值对。2、链...
- long和double类型操作的非原子性探究
-
前言“深入java虚拟机”中提到,int等不大于32位的基本类型的操作都是原子操作,但是某些jvm对long和double类型的操作并不是原子操作,这样就会造成错误数据的出现。其实这里的某些jvm是指...
- 数据库DELETE 语句,还保存原有的磁盘空间
-
MySQL和Oracle的DELETE语句与数据存储MySQL的DELETE操作当你在MySQL中执行DELETE语句时:逻辑删除:数据从表中标记为删除,不再可见于查询结果物理...
- 线程池—ThreadPoolExecutor详解(线程池实战)
-
一、ThreadPoolExecutor简介在juc-executors框架概述的章节中,我们已经简要介绍过ThreadPoolExecutor了,通过Executors工厂,用户可以创建自己需要的执...
- navicat如何使用orcale(详细步骤)
-
前言:看过我昨天文章的同鞋都知道最近接手另一个国企项目,数据库用的是orcale。实话实说,也有快三年没用过orcale数据库了。这期间问题不断,因为orcale日渐消沉,网上资料也是真真假假,难辨虚...
- 你的程序是不是慢吞吞?GraalVM来帮你飞起来性能提升秘籍大公开
-
各位IT圈内外的朋友们,大家好!我是你们的老朋友,头条上的IT技术博主。不知道你们有没有这样的经历:打开一个软件,半天没反应;点开一个网站,图片刷不出来;或者玩个游戏,卡顿得想砸电脑?是不是特别上火?...
- 大数据正当时,理解这几个术语很重要
-
目前,大数据的流行程度远超于我们的想象,无论是在云计算、物联网还是在人工智能领域都离不开大数据的支撑。那么大数据领域里有哪些基本概念或技术术语呢?今天我们就来聊聊那些避不开的大数据技术术语,梳理并...
- 秒懂列式数据库和行式数据库(列式数据库的特点)
-
行式数据库(Row-Based)数据按行存储,常见的行式数据库有Mysql,DB2,Oracle,Sql-server等;列数据库(Column-Based)数据存储方式按列存储,常见的列数据库有Hb...
- AMD发布ROCm 6.4更新:带来了多项底层改进,但仍不支持RDNA 4
-
AMD宣布,对ROCm软件栈进行了更新,推出了新的迭代版本ROCm6.4。这一新版本里,AMD带来了多项底层改进,包括更新改进了ROCm的用户空间库和AMDKFD内核驱动程序之间的兼容性,使其更容易...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- oracle位图索引 (74)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (59)
- oracle 空为0 (51)
- oracle主从同步 (56)
- oracle 乐观锁 (53)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)