关于 Redis 的一些新特性、使用建议和最佳实践
mhr18 2024-10-31 13:31 23 浏览 0 评论
redis从2009年诞生到现在已经走过将近10年,从最开始大家在讨论nosql和传统关系数据库孰优孰劣,到现在大家谈起分布式锁,缓存纷纷将Redis作为其第一选择,服务端面试中Redis也作为一项必备能力,而如今Redis 5.0已经发布,越来越多的新特性被加入,我完整的观察到并参与了一项新的开源产品从走入大家的视野到被接受,之后再流行的整个过程,也同时见证了memcache的日薄西山。
但是在工作中发现很多人只是了解一些Redis的基本使用,也并未完整的阅读过Redis的官方文档,对于一些命令不熟悉,不同场景下滥用不合理的数据结构,对一些新的特性似乎也不会去关注。鉴于自己对Redis的一些了解和实践经验,并收集了网络上一些资料,总结了一些使用建议。
特性
1、SET key value [expiration EX seconds|PX milliseconds][NX|XX]
- Redis 2.6.12版本后的Set命令支持过期时间等参数,不必再像以前一样分为set和expire两个命令
2、bitmap
- 适用于大量数据的位图信息标记,例如如果要标记大量用户的某个状态值,可以考虑使用bitmap
- bitmap的另外一个应用是基于redis的bloom filter
3、stream
- Redis4开始提供的新的数据结构,可以理解成轻量级的kafka steam,主要解决了pub/sub无法保证通知处理成功和blocked list无法多个client消费的问题,具体点击此处查看topic。
- 如果想实现一个简单的聊天室,可以尝试下steam。
使用建议
1、合理分配过期时间
- 不管是将Redis作为缓存,还是存储,如果不愿意看到内存被慢慢消耗殆尽,最后只能扩容或者人工介入,就给自己的key设置一个合理的过期时间。当把Redis作为缓存时,更要预估自己的数据量和数据大小,选择一个合理的过期时间。
2、多个操作使用pinepine
- 这是Redis使用中的一项基本原则,同时需要知道,另外如果下一个命令的input基于上一个命令的output,就不可以放到一个pipeline里面执行了
- 使用时考虑pipeline中一个命令执行失败的场景,后面的命令未执行是否因为一致性带来问题
3、使用命名空间
- 方便key的管理,我们开发中常用的redis-desktop客户端能够按照命名空间对key进行展示,另外,命名空间方便需要对某一类key进行统计和管理
- 如果需要通过key进行分片,命名空间可以作为分片参数
4、选用合适的数据结构
- 理解每个数据结构的用途,和常用的命令,我曾经见过开发人员因为不知道scard命令可以获得set的size,而将所有的元素取出然后在程序中计算,所以需要平时多查看Redis命令文档;如果能够理解每种数据结构背后的原理,使用时会更加得心应手。
- 不建议使用Redis缓存单个数据大小较大的对象,尤其是使用Set,Hash此类数据结构时候,考虑到Redis是单线程,过多的大对象访问增加了网络IO压力,对Redis性能有一定影响,另一方面Redis的虚拟内存page较小,如果内存碎片率较高,则分配/申请内存时在性能上有些影响。如果要缓存较大的对象,可以考虑memcache
5、禁用keys
- 很基本的Redis使用常识,可以通过rename-command来将一些类似的命令重命名,实现disable的效果
6、选用lua script
- 如果要保证多个操作的原子性,可以选择使用lua脚本
7、config set parameter value
- redis 2.0后提供了config set 命令来动态修改一些运行参数而不必重启redis,目前已经支持动态修改maxmemory,可以通过CONFIG GET * 查看支持动态修改的参数列表
最佳实践
1、key的命名
- 合理的命名自己的key,不能在查看数据时可读性更强,也更便于统计和管理
2、key name的长度
- 预估key的存活数量,如果key的数量可能达到百万级别,就需要考虑key的名字过长而导致占用太多的存储空间,我在曾经参与过的一个消息系统中使用redis存储消息阅读量,但是后面由于消息量过多,导致name的占用空间达到几百M,如果精简name,可以节省大量的空间,减少不必要的困扰。例如,保存用户的基本信息可以使用u:${id}
3、不滥用Lua Script
- 由于Redis是单线程,在QPS很高的情况下,过多的lua脚本执行,特别是内部包含较多业务逻辑处理的情况下,会对Redis性能产生很大的影响。曾经参与过的直播业务的生产环境中,我们在Lua脚本中对送礼物触发的的积分和活动信息的有较多的逻辑处理(20行左右),导致Redis负载100%,所以在排查时Lua脚本有可能是负载较高的元凶之一。
4、关注内存和slowlog等统计数据
- 通过info memory查看内存的分配和使用大小,碎片等情况
- slowlog get N 查看最近几条执行较慢的命令
- 通过redis-cli --bigkeys 通过采样scan元素较多的key,不会一直阻塞redis执行
- 更多好玩的redis-cli命令可以查看此处
monitor命令不建议生产环境使用
面对一款优秀开源产品,我们除了要了解它的基本使用,也要擅于运用才能更好发挥其作用,否则会有不必要的麻烦,甚至适得其反。当然如果能深入了解其内部运行机制,知其然并知其所以然,并基于此创造出更加优秀的开源产品,就更符合coder的hacker精神。
相关推荐
- Java培训机构,你选对了吗?(java培训机构官网)
-
如今IT行业发展迅速,不仅是大学生,甚至有些在职的员工都想学习java开发,需求量的扩大,薪资必定增长,这也是更多人选择java开发的主要原因。不过对于没有基础的学员来说,java技术不是一两天就能...
- 产品经理MacBook软件清单-20个实用软件
-
三年前开始使用MacBookPro,从此再也不想用Windows电脑了,作为生产工具,MacBook可以说是非常胜任。作为产品经理,值得拥有一台MacBook。MacBook是工作平台,要发挥更大作...
- RAD Studio(Delphi) 本月隆重推出新的版本12.3
-
#在头条记录我的2025#自2024年9月,推出Delphi12.2版本后,本月隆重推出新的版本12.3,RADStudio12.3,包含了Delphi12.3和C++builder12.3最...
- 图解Java垃圾回收机制,写得非常好
-
什么是自动垃圾回收?自动垃圾回收是一种在堆内存中找出哪些对象在被使用,还有哪些对象没被使用,并且将后者删掉的机制。所谓使用中的对象(已引用对象),指的是程序中有指针指向的对象;而未使用中的对象(未引用...
- Centos7 初始化硬盘分区、挂载(针对2T以上)添加磁盘到卷
-
1、通过命令fdisk-l查看硬盘信息:#fdisk-l,发现硬盘为/dev/sdb大小4T。2、如果此硬盘以前有过分区,则先对磁盘格式化。命令:mkfs.文件系统格式-f/dev/sdb...
- 半虚拟化如何提高服务器性能(虚拟化 半虚拟化)
-
半虚拟化是一种重新编译客户机操作系统(OS)将其安装在虚拟机(VM)上的一种虚拟化类型,并在主机操作系统(OS)运行的管理程序上运行。与传统的完全虚拟化相比,半虚拟化可以减少开销,并提高系统性能。虚...
- HashMap底层实现原理以及线程安全实现
-
HashMap底层实现原理数据结构:HashMap的底层实现原理主要依赖于数组+链表+红黑树的结构。1、数组:HashMap最底层是一个数组,称为table,它存放着键值对。2、链...
- long和double类型操作的非原子性探究
-
前言“深入java虚拟机”中提到,int等不大于32位的基本类型的操作都是原子操作,但是某些jvm对long和double类型的操作并不是原子操作,这样就会造成错误数据的出现。其实这里的某些jvm是指...
- 数据库DELETE 语句,还保存原有的磁盘空间
-
MySQL和Oracle的DELETE语句与数据存储MySQL的DELETE操作当你在MySQL中执行DELETE语句时:逻辑删除:数据从表中标记为删除,不再可见于查询结果物理...
- 线程池—ThreadPoolExecutor详解(线程池实战)
-
一、ThreadPoolExecutor简介在juc-executors框架概述的章节中,我们已经简要介绍过ThreadPoolExecutor了,通过Executors工厂,用户可以创建自己需要的执...
- navicat如何使用orcale(详细步骤)
-
前言:看过我昨天文章的同鞋都知道最近接手另一个国企项目,数据库用的是orcale。实话实说,也有快三年没用过orcale数据库了。这期间问题不断,因为orcale日渐消沉,网上资料也是真真假假,难辨虚...
- 你的程序是不是慢吞吞?GraalVM来帮你飞起来性能提升秘籍大公开
-
各位IT圈内外的朋友们,大家好!我是你们的老朋友,头条上的IT技术博主。不知道你们有没有这样的经历:打开一个软件,半天没反应;点开一个网站,图片刷不出来;或者玩个游戏,卡顿得想砸电脑?是不是特别上火?...
- 大数据正当时,理解这几个术语很重要
-
目前,大数据的流行程度远超于我们的想象,无论是在云计算、物联网还是在人工智能领域都离不开大数据的支撑。那么大数据领域里有哪些基本概念或技术术语呢?今天我们就来聊聊那些避不开的大数据技术术语,梳理并...
- 秒懂列式数据库和行式数据库(列式数据库的特点)
-
行式数据库(Row-Based)数据按行存储,常见的行式数据库有Mysql,DB2,Oracle,Sql-server等;列数据库(Column-Based)数据存储方式按列存储,常见的列数据库有Hb...
- AMD发布ROCm 6.4更新:带来了多项底层改进,但仍不支持RDNA 4
-
AMD宣布,对ROCm软件栈进行了更新,推出了新的迭代版本ROCm6.4。这一新版本里,AMD带来了多项底层改进,包括更新改进了ROCm的用户空间库和AMDKFD内核驱动程序之间的兼容性,使其更容易...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- oracle位图索引 (74)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (59)
- oracle 空为0 (51)
- oracle主从同步 (56)
- oracle 乐观锁 (53)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)