Redis 在 Web 项目中的应用与实践
mhr18 2024-11-01 12:21 18 浏览 0 评论
Redis作为一个开源的(BSD)基于内存的高性能存储系统,已经被各大互联网公司广泛使用,并且有着诸多的应用场景。本篇文章将基于PHP来详细讲解Redis在Web项目中的主要应用与实践。
缓存
这里所介绍的缓存是指可以丢失或过期的数据。常用的命令有 set, hset, get, hget,使用redis作为缓存时需要注意一下几个问题:
- 由于redis的可用内存是有限的,不能容忍redis内存的无限增长,建议设置 maxmemory 最大内存。
- 在开启maxmemory的情况下,可以启用lru机制,设置key的expire,当到达Redis最大内存时,Redis会根据最近最少用算法对key进行自动淘汰。
- Redis的持久化策略和Redis故障恢复时间是一个博弈的过程,如果你希望在发生故障时能够尽快恢复,应该启用dump备份机制,但这样需要更多的可用内存空间来进行持久化。如果能够容忍Redis漫长的故障恢复时间,可以使用AOF持久化机制,同时关闭dump机制,这样不需要额外的内存空间。
存储
在web项目中,redis可存储读写非常频繁的数据来缓解MySQL等数据库的压力。redis如果作为存储系统的话,为了防止数据丢失,持久化必须开启。
典型场景
计数器
计数器的需求非常普遍,例如微博点赞数、帖子收藏数、文章分享数、用户关注数等。
社交列表
比如使用Sets结构存储关注列表、收藏列表、点赞列表等。
Session
借助redis高性能的key-value存储,可将用户登录状态保存到redis中。
…
队列
简单队列
一般使用redis的list结构作为队列,rpush 生产消息,lpop 消费消息,当 lpop 没有消息的时候,要进行适当的sleep操作。
$queueKey = "queue"; // 生产者 $redis->rpush($queueKey, $data) // 消费者 while (true) { $data = $redis->lpop($queueKey); if (null === $data) { usleep(100000); continue; } // 业务逻辑 ... }
由于没有消息时使用的sleep事件不好控制,生产环境尽量不要使用sleep来休眠,可使用 blpop 来消费消息,在没有新消息的时候它会阻塞到消息到来。
延时队列
延时队列可使用redis的 sorted set 数据结构,使用时间戳作为 score ,消息内容作为 member,使用 zadd 命令来生产消息,消费者使用 zrangebyscore 命令获取指定时间之前的消息数据轮询进行处理。
$queueKey = "queue"; // 生产消息 // 消费时间, 这里设置为1小时候 $consumeTimestamp = time() + 3600; // $data需要添加随机串前缀(or后缀),防止出现重复member被丢弃 $data = $data . md5(uniqid(rand(), true)); $redis->zadd($queueKey, $consumeTimestamp, $data); // 消费消息 while (tue) { $arrData = $redis->zrangebyscore($queueKey, 0, time()); if (!$arrData) { usleep(100000); continue; } // 业务逻辑 foreach ($arrData as $data) { $data = substr($data, 0, strlen($data) - 32); // 消费$data } }
多消费者
使用pub/sub主题订阅者模式,可以实现1:N的消息队列。这种模式中在消费者下线的情况下,生产的消息会丢失,在这里不推荐使用。
需要强调的是不推荐使用redis作为消息队列服务,这不是redis的设计目标。如果一定要用可考虑 disque,是由redis的作者开发。
分布式锁
分布式锁主要解决的几个问题:
- 互斥性: 同一时刻只能有一个服务(或应用)访问资源
- 安全性: 锁只能被持有该锁的服务(或应用)释放
- 容错: 在持有锁的服务crash时,锁仍能得到释放
- 避免死锁
方案1
我们可能会考虑使用 setnx 和 expire 命令来实现加锁,即当没有key存在时才会成功写入value:
$lockStatus = $redis->setnx($lockKey, 1); if (1 === $lockStatus) { // 加锁成功,为锁设置超时时间 $redis->expire($lockKey, 300); // 进行后续操作 } elseif (0 === $lockStatus) { // 加锁失败 } else { // 其他异常 }
但这种操作不是原子性的,如果在进行setnx时服务崩溃,没有来得及对Key进行超时设置,该锁将一直无法释放。
方案2
我们推荐 set key value [EX seconds] [PX milliseconds] [NX|XX] 命令来进行加锁
- EX: key在多少秒之后过期
- PX:key在多少毫秒之后过期
- NX: 当key不存在的时候,才创建key,效果等同于setnx
- XX:当key存在的时候,覆盖key
$lockStatus = $this->redis->set($lockKey, 1, "EX", 30, "NX"); if ("OK" === $lockStatus) { // 加锁成功,可进行后续操作 //业务逻辑执行完毕,释放锁 $this->redis->del($lockKey); } elseif (null === $lockStatus) { // 加锁失败 }
如上代码所示,如果 set 命令返回OK,那么客户端就可以获得锁(如果返回null,那么应用服务可以在一段时间之后重新尝试获取锁),并且可以通过 del 命令来释放锁。
此方法需要注意的问题:
- a服务获得的锁(键key)已经由于已到过期时间被redis服务器删除,但是这个时候a服务还去执行DEL命令。而b服务经在a设置的过期时间之后重新获取了这个同样key的锁,那么a执行 del 就会释放了b服务加好的锁。
- 当同一时刻有大量的key过期的时候,删除key时会增加redis压力,会影响服务稳定。
可以通过如下优化使得上面的锁系统变得更加健壮:
- 不要设置固定的字符串,而是设置为随机的大字符串,可以称为token。
- 通过脚本删除指定锁的key,而不是 del 命令。
- 在设置key过期时间的时候加上一个随机值。
优化后的代码可参考如下:
$lockToken = md5(uniqid(rand(), true)); // 此处超时时间根据具体业务逻辑配置 $expire = rand(280, 320); $lockStatus = $this->redis->set($lockKey, $lockToken, "EX", $expire, "NX"); if ("OK" === $lockStatus) { // 加锁成功,可进行后续操作 // 业务逻辑执行完毕,释放锁 // 删除锁之前需要判断是否是自己上的锁 $currentToken = $this->redis->get($lockKey); if ($currentToken === $lockToken) { $this->redis->del($lockKey); } } elseif (null === $lockStatus) { // 加锁失败 }
计算
redis提供的原子自增减方法以及有序集合结构等可以承担一些计算任务,例如浏览量统计等。
浏览计数
文章浏览量+1
$redis->incr($postsKey);
批量获取文章浏览量
$arrPostsKey = [ //... ]; $arrPostsViewNum = $redis->mget($arrPostsKey);
排行榜
可以使用redis的有序集合来实现排行榜的功能,score作为权重排序并取前n条记录。
// 存储数据 $sortKey = "sort_key"; $redis->zadd($sortKey, 100, "tom"); $redis->zadd($sortKey, 80, "Jon"); $redis->zadd($sortKey, 59, "Lilei"); $redis->zadd($sortKey, 87, "Hanmeimei"); // 获取排行 // 由大到小排序 $arrRet = $redis->zrevrange($sortKey, 0, -1, true); // 由小到大排序 $arrRet = $redis->zrange($sortKey, 0, -1, true);
相关推荐
- MySQL数据库中,数据量越来越大,有什么具体的优化方案么?
-
个人的观点,这种大表的优化,不一定上来就要分库分表,因为表一旦被拆分,开发、运维的复杂度会直线上升,而大多数公司和开发人员是欠缺这种能力的。所以MySQL中几百万甚至小几千万的表,先考虑做单表的优化。...
- Redis的Bitmap(位图):签到打卡、用户在线状态,用它一目了然
-
你是不是每天打开APP,第一时间就是去“签到打卡”?或者在社交软件里,看到你的朋友头像旁边亮着“在线”的绿灯?这些看似简单的功能背后,都隐藏着一个有趣而高效的数据结构。如果让你来设计一个签到系统:用户...
- 想知道有多少人看了你的文章?Redis HyperLogLog几KB就搞定!
-
作为一名内容创作者,你每天最期待的,除了文章阅读量蹭蹭上涨,是不是还特别想知道,到底有多少个“独立用户”阅读了你的文章?这个数字,我们通常称为“UV”(UniqueVisitors),它比总阅读量更...
- Redis的“HyperLogLog”:统计网站日活用户,省内存又高效的神器
-
你可能从未听过这个拗口的名字——“HyperLogLog”,它听起来就像是某个高深莫测的数学公式。但请相信我,理解它的核心思想并不难,而且一旦你掌握了它,你会发现它在处理大数据统计问题时,简直就是“救...
- 阿里云国际站:为什么我的云服务器运行缓慢?
-
本文由【云老大】TG@yunlaoda360撰写一、网络性能瓶颈带宽不足现象:上传/下载速度慢,远程连接卡顿。排查:通过阿里云控制台查看网络流量峰值是否接近带宽上限34。解决:升级带宽(如从1M提...
- Java 近期新闻:Jakarta EE 11和Spring AI更新、WildFly 36.0 Beta、Infinispan
-
作者|MichaelRedlich译者|明知山策划|丁晓昀OpenJDKJEP503(移除32位x86移植版本)已从“ProposedtoTarget”状态进入到“T...
- 腾讯云国际站:怎样设置自动伸缩应对流量高峰?
-
云计算平台服务以阿里云为例:开通服务与创建伸缩组:登录阿里云控制台,找到弹性伸缩服务并开通。创建伸缩组时,选择地域与可用区,定义伸缩组内最小/最大实例数,绑定已有VPC虚拟交换机。实例模板需...
- 【案例分享】如何利用京东云建设高可用业务架构
-
本文以2022年一个实际项目为基础,来演示在京东云上构建高可用业务的整个过程。公有云及私有云客户可通过使用京东云的弹性IAAS、PAAS服务,创建高可用、高弹性、高可扩展、高安全的云上业务环境,提升业...
- Spring Security在前后端分离项目中的使用
-
1文章导读SpringSecurity是Spring家族中的一个安全管理框架,可以和SpringBoot项目很方便的集成。SpringSecurity框架的两大核心功能:认证和授权认证:...
- Redis与Java集成的最佳实践
-
Redis与Java集成的最佳实践在当今互联网飞速发展的时代,缓存技术的重要性毋庸置疑。Redis作为一款高性能的分布式缓存数据库,与Java语言的结合更是如虎添翼。今天,我们就来聊聊Redis与Ja...
- Redis在Java项目中的应用与数据持久化
-
Redis在Java项目中的应用与数据持久化Redis简介:为什么我们需要它?在Java项目中,Redis就像一位不知疲倦的快跑选手,总能在关键时刻挺身而出。作为一个内存数据库,它在处理高并发请求时表...
- Redis 集群最大节点个数是多少?
-
Redis集群最大节点个数取决于Redis的哈希槽数量,因为每个节点可以负责多个哈希槽。在Redis3.0之前,Redis集群最多支持16384个哈希槽,因此最大节点数为16384个。但是在Redi...
- Java开发岗面试宝典:分布式相关问答详解
-
今天千锋广州Java小编就给大家分享一些就业面试宝典之分布式相关问题,一起来看看吧!1.Redis和Memcache的区别?1、存储方式Memecache把数据全部存在内存之中,断电后会挂掉,数据不...
- 当Redis内存不足时,除了加内存,还有哪些曲线救国的办法?
-
作为“速度之王”的Redis,其高性能的秘密武器之一就是将数据存储在内存中。然而,内存资源是有限且昂贵的。当你的Redis实例开始告警“内存不足”,或者写入请求被阻塞时,最直接的解决方案似乎就是“加内...
- 商品详情页那么多信息,Redis的“哈希”如何优雅存储?
-
你每天网购时,无论是打开淘宝、京东还是拼多多,看到的商品详情页都琳琅满目:商品名称、价格、库存、图片、描述、评价数量、销量。这些信息加起来,多的惊人。那么问题来了:这些海量的商品信息,程序是去哪里取出...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- MySQL数据库中,数据量越来越大,有什么具体的优化方案么?
- Redis的Bitmap(位图):签到打卡、用户在线状态,用它一目了然
- 想知道有多少人看了你的文章?Redis HyperLogLog几KB就搞定!
- Redis的“HyperLogLog”:统计网站日活用户,省内存又高效的神器
- 阿里云国际站:为什么我的云服务器运行缓慢?
- Java 近期新闻:Jakarta EE 11和Spring AI更新、WildFly 36.0 Beta、Infinispan
- 腾讯云国际站:怎样设置自动伸缩应对流量高峰?
- 【案例分享】如何利用京东云建设高可用业务架构
- Spring Security在前后端分离项目中的使用
- Redis与Java集成的最佳实践
- 标签列表
-
- oracle位图索引 (63)
- oracle批量插入数据 (62)
- oracle事务隔离级别 (53)
- oracle 空为0 (50)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)