10年老架构师,带你如何使用Redis提升应用的并发访问能力
mhr18 2024-10-25 12:37 52 浏览 0 评论
使用Redis提升应用的并发访问能力
有时,为了提升整个网站的性能,程序员会将经常需要访问的数据缓存起来,这样,在下次查缓存的使用与系统的时效性有着非常大的关系。当所使用的系统时效性要求不高时,选择使用本节将演示如何通过集成Redis服务器来进行数据的缓存,以提高微服务的并发访问能力。
为什么需要缓存
天气数据接口,本身时效性不是很高,而且又因为是Web服务,在调用过程中,本身是存在延时的。所以,采用缓存,一方面可以有效减轻访问天气接口服务带来的延时问题;另一方面也可以减轻天气接口的负担,提高并发访问量。
特别是使用第三方免费的天气API,这些API往往对用户的调用次数及频率有一定的限制。所以为了减轻天气API提供方的负荷,并不需要去实时调用其第三方接口。
在micro-weather-basic的基础上,程序员构建了一个micro-weather-redis项目作为示例
开发环境
为了演示本例,需要采用如下开发环境。
.JDK8。
.Gradle 4.0。
. Spring Boot Web Starter 2.0.0.M4。
Apache HttpClient 4.5.3。
.Spring Boot Data Redis Starter 2.0.0.M4。
.Redis 3.2.100。
项目配置
Spring Boot Data Redis提供了Spring Boot对Redis的开箱即用功能。在原有的依赖基础上,添加Spring Boot Data Redis Starter的依赖。
/依赖关系
dependencies{
/l...
//添加Spring Boot Data Redis Starter依赖
compile('org.springframework.boot:spring-boot-starter-data-redis')
//...
}
下载、安装并运行Redis
在Linux平台上安装Redis比较简单,可以参考官方文档,详见https:lgithub.com/antirez/redis.
而在Windows平台,微软特别为Redis制作了安装包,下载地址为https:/lgithub.com/Micro-softArchive/redis/releases。本节所使用的案例,也是基于该安装包来进行的。双击redis-server.exe文件,就能快速启动Redis服务器了。
安装后,Redis默认运行在地址端口,如图6-2所示。
修改WeatherDataServicelmpl
修改WeatherDataServiceImpl,增加了StringRedisTemplate,用于操作Redis.
@service
public class WeatherDataServicelmpl implements WeatherDataService{
private final static Logger logger = Loggeractory.getLogger(Weather
DataServicempl.class);
@Autowired
private RestTemplate restTemplate;
@Autowired
private stringRedisTemplate stringRedisTemplate;
private final String WEATHER_API = "http://wthrcdn.etouch.cn/weather_mini";
private final Long TIME OUT = 1800L;//缓存超时时间
override
public WeatherResponse getDataByCityId(String cityId){
String uri= WEATHER_API +"?citykey=" +cityId;
return this .doGetWeatherData(uri);
}
@override
public WeatherResponse getDataByCityName (String cityName)1
String uri = WEATHER_API +"?city=" + cityName;
return this.doGetWeatherData (uri);
}
private WeatherResponse doGeteatherData(String uri){
ValueOperations<string, String> opS= this.stringRedisTemplate.
opsF'orValue();
String key - uri;//将调用的UR工作为缓存的key
String strBody = null;
//先查缓存,如果没有再查服务
if(!this.stringRedisTemplate.hasKey(key)) {
logger.info("未找到key " + key);
ResponseEntity<String> response= restTemplate.getForEntity
(uri,String.class);
if(response.getStatusCodeValue(--200) f
strBody =response.getBody (;
ops.set(key,strBody,TIME_OUT,TimeUnit.SECONDS);
Helse {
logger.info("找到key " +key + ",value=" + Ops.get(key));
strBody=ops.get(key);
objectMapper mapper = new ObjectMapper(;
WeatherResponse weather = null;
try {
weather = mapper.readValue(strBody,WeatherResponse.class);
}catch (IOException e){
logger.error("JSON反序列化异常!",e);
return weather;}
}
修改了doGetWeatherData方法,增加了Redis数据的判断。
- 当存在某个key(天气接口的URI,是唯一代表某个地区的天气数据)时,就可以从Redis 里面取缓存数据。
- 当不存在某个key(没有初始化数据或数据过期了)时,重新去天气接口里面取最新的数据,并初始化到Redis 中。
- 由于天气数据更新频率的特点(基本上一个小时或半个小时更新一次),因此,我们在Redis里面设置了30分钟的超时时间。
其中,StringRedisTemplate与RedisTemplate功能类似,都是封装了对Redis的一些常用的操作。
它们的区别在于,StringRedisTemplate更加专注于基于字符串的操作,毕竟,在目前的天气预报应用中,数据的格式主要是JSON字符串。
ValueOperations接口封装了大部分简单的K-V操作。
同时,我们也使用了日志框架来记录运行过程及日常的信息。
测试和运行
首先,在进行测试前,需要将Redis服务器启动起来。
我们可以通过在一个时间段内多次访问同一个天气接口来测试效果,比如接口http:/local-host:8080/weather/cityId/101280601。为了缩短测试的时间,可以将Redis的超时时间缩短一点,如缩短10秒。这样,就不用等30分钟才能验证数据是否过期了。
2017-10-18 23:51:41.762 INFO 15220---[nio-8080-exec-6]
:未找到 key http://wthrcdn .
C.w.s.c.w.s.WeatherDataServicelmpl
etouch.cn/weather mini?citykey=101280601
2017-10-18 23:51:43.649 INFO 15220 ---[nio-8080-exec-5]
:找到key http://wthrcdn .
C.w.s.c.w.s.WeatherDataService工mpl
etouch.cn/weather_mini?citykey=101280601,value={ "data":{ "yesterday":
f "date":"17日星期二", "high":"高温29℃","fx":"无持续风向","low":"低温
22℃","fl":"<![CDATA[<3级]]>","type":"多云"),"city":"深圳", "aqi":"35",
"forecast":[ ( "date":"18日星期三" , "high":"高温29℃", "fengli":"<![CDATA[<3
级]]>","low":"低温23℃", "fengxiang":"无持续风向", "type":"多云"),("date":
"19日星期四", "high":"高温29℃" , "fengli":"<![CDATA[<3级]]>","low":"低温23℃",
"fengxiang":"无持续风向","type":"多云"),{ "date" :"20日星期五" , "high" :"高温
30℃", "fengli":"<![CDATA[<3级]]>","low":"低温22℃", "fengxiang":"无持续风向
" , "type":"多云"},("date":"21日星期六","high":"高温29℃", "fengli":"<![CDATA
[<3级]]>", "low":"低温21℃", "fengxiang":"无持续风向", "type":"多云"),{"date":
"22日星期天", "high":"高温28℃", "fengli":"<![CDATA[<3级]]>","low":"低温
21℃","fengxiang ":"无持续风向","type" :"多云")],"ganmao":"各项气象条件适宜,无
明显降温过程,发生感冒概率较低。","wendu":"25"), "status":1000, "desc":"OK"}
2017-10-18 23:51:46.700 INFO 15220---[nio-8080-exec-7]
:找到key http://wthrcdn.
c.w.s.c.w.s.WeatherDataServiceImpl
etouch.cn/weather_mini?citykey=101280601,value={ "data":{ "yesterday" :( "-
date":"17日星期二","high":"高温29℃","fx":"无持续风向","low":"低温22℃",
"fl":"<![CDATA[<3级]]>","type":"多云"},"city":"深圳", "aqi":"35","forecast":
[ {"date":"18日星期三", "high":"高温29℃", "fengli":"<![CDATA[<3级]]>",
"low":"低温23℃","fengxiang":"无持续风向", "type":"多云"),( "date":"19日星期
四", "high":"高温29℃" , "fengli" : "<![CDATA[<3级]]>","low":"低温23℃",
"fengxiang":"无持续风向", "type":"多云"},{"date":"20日星期五", "high":"高温
30C", "fengli":"<![CDATA[<3级]]>","low":"低温22℃","fengxiang":"无持续风
向","type":"多云"),{"date":"21日星期六","high":"高温29℃","fengli":"<!
[CDATA[<3级]]>","low":"低温21℃", "Eengxiang":"无持续风向", "type":"多云"),
( "date":"22日星期天" , "high":"高温28℃", "fengli" :"<![CDATA[<3级]]>",
"low":"低温21℃","fengxiang":"无持续风向","type":"多云"H],"ganmao":"各项
气象条件适宜,无明显降温过程,发生感冒概率较低。","wendu":"25"},"status":1000,
" desc":"OK"}
2017-10-18 23:51:50.513 INFO 15220 ---[nio-8080-exec-8]
c.w.s.c.w.s.WeatherDataserviceImpl
:找到 key http://wthrcdn.
etouch.cn/weather_mini?citykey=101280601, value={"data":{ "yesterday":
( "date":"17日星期二","high":"高温29℃","fx":"无持续风向","low":"低温22℃",
"fI":"<![CDATA[<3级]]>", "type ":"多云"),"city":"深圳",, "aqi":"35","forecast":
[{"date":"18日星期三", "high":"高温29℃", "fengli":"<![CDATA[<3级]1>",
"lowt":"低温23℃","fengxiang":"无持续风向","type" :"多云"),{"date":"19日星期
四", "high":"高温29℃", "fengli":"<![CDATA[<3级]]>","low":"低温23℃",
"fengxiang":"无持续风向","type":"多云"),{"date":"20日星期五","high":"高温
3o℃","fengli":"<![CDATA[<3级]]>","low":"低温22℃","fengxiang":"无持续风向
", "type":"多云"},{"date":"21日星期六", "high":"高温29℃", "fengli":"<![CDATA
[<3级]]>","low":"低温21℃","fengxiang":"无持续风向","type":"多云"),{"date" :
"22日星期天","high":"高温28℃","fengli":"<![CDATA[<3级]]>","low":"低温21℃",
"fengxiang":"无持续风向","type":"多云")],"ganmao":"各项气象条件适宜,无明显降
温过程,发生感冒概率较低。","wendu":"25"),"status":1000, "desc":"OK"}
2017-10-18 23:51:53.140 INFO 15220 ---[nio-8080-exec-9] c.w.s.C.W.s.
:未找到key http://wthrcdn.etouch.cn/weather_
WeatherDataServiceImpl
mini?citykey=101280601
从上述日志可以看到,第一次(23:51:41)访问接口时,没有找到Redis里面的数据,所以,就初始化了数据。后面几次访问,都是访问Redis里面的数据。最后一次(23:51:53 ),由于超时,Redis里面没有数据了,因此又会拿天气接口的数据。
本篇内容给大家讲解的是使用Redis提升应用的并发访问能力
- 下篇文章给大家介绍如何实现天气数据的同步;
- 觉得文章不错的朋友可以转发此文关注小编;
- 感谢大家的支持!!
相关推荐
- 订单超时自动取消业务的 N 种实现方案,从原理到落地全解析
-
在分布式系统架构中,订单超时自动取消机制是保障业务一致性的关键组件。某电商平台曾因超时处理机制缺陷导致日均3000+订单库存锁定异常,直接损失超50万元/天。本文将从技术原理、实现细节、...
- 使用Spring Boot 3开发时,如何选择合适的分布式技术?
-
作为互联网大厂的后端开发人员,当你满怀期待地用上SpringBoot3,准备在项目中大显身手时,却发现一个棘手的问题摆在面前:面对众多分布式技术,究竟该如何选择,才能让SpringBoot...
- 数据库内存爆满怎么办?99%的程序员都踩过这个坑!
-
你的数据库是不是又双叒叕内存爆满了?!服务器监控一片红色警告,老板在群里@所有人,运维同事的电话打爆了手机...这种场景是不是特别熟悉?别慌!作为一个在数据库优化这条路上摸爬滚打了10年的老司机,今天...
- springboot利用Redisson 实现缓存与数据库双写不一致问题
-
使用了Redisson来操作Redis分布式锁,主要功能是从缓存和数据库中获取商品信息,以下是针对并发时更新缓存和数据库带来不一致问题的解决方案1.基于读写锁和删除缓存策略在并发更新场景下,...
- 外贸独立站数据库炸了?对象缓存让你起死回生
-
上周黑五,一个客户眼睁睁看着服务器CPU飙到100%——每次页面加载要查87次数据库。这让我想起2024年Pantheon的测试:Redis缓存能把WooCommerce查询速度提升20倍。跨境电商最...
- 手把手教你在 Spring Boot3 里纯编码实现自定义分布式锁
-
为什么要自己实现分布式锁?你是不是早就受够了引入各种第三方依赖时的繁琐?尤其是分布式锁这块,每次集成Redisson或者Zookeeper,都得额外维护一堆配置,有时候还会因为版本兼容问题头疼半...
- 如何设计一个支持百万级实时数据推送的WebSocket集群架构?
-
面试解答:要设计一个支持百万级实时数据推送的WebSocket集群架构,需从**连接管理、负载均衡、水平扩展、容灾恢复**四个维度切入:连接层设计-**长连接优化**:采用Netty或Und...
- Redis数据结构总结——面试最常问到的知识点
-
Redis作为主流的nosql存储,面试时经常会问到。其主要场景是用作缓存,分布式锁,分布式session,消息队列,发布订阅等等。其存储结构主要有String,List,Set,Hash,Sort...
- skynet服务的缺陷 lua死循环
-
服务端高级架构—云风的skynet这边有一个关于云风skynet的视频推荐给大家观看点击就可以观看了!skynet是一套多人在线游戏的轻量级服务端框架,使用C+Lua开发。skynet的显著优点是,...
- 七年Java开发的一路辛酸史:分享面试京东、阿里、美团后的心得
-
前言我觉得有一个能够找一份大厂的offer的想法,这是很正常的,这并不是我们的饭后谈资而是每个技术人的追求。像阿里、腾讯、美团、字节跳动、京东等等的技术氛围与技术规范度还是要明显优于一些创业型公司...
- mysql mogodb es redis数据库之间的区别
-
1.MySQL应用场景概念:关系型数据库,基于关系模型,使用表和行存储数据。优点:支持ACID事务,数据具有很高的一致性和完整性。缺点:垂直扩展能力有限,需要分库分表等方式扩展。对于复杂的查询和大量的...
- redis,memcached,nginx网络组件
-
1.理解阻塞io,非阻塞io,同步io,异步io的区别2.理解BIO和AIO的区别io多路复用只负责io检测,不负责io操作阻塞io中的write,能写多少是多少,只要写成功就返回,譬如准备写500字...
- SpringBoot+Vue+Redis实现验证码功能
-
一个小时只允许发三次验证码。一次验证码有效期二分钟。SpringBoot整合Redis...
- AWS MemoryDB 可观测最佳实践
-
AWSMemoryDB介绍AmazonMemoryDB是一种完全托管的、内存中数据存储服务,专为需要极低延迟和高吞吐量的应用程序而设计。它与Redis和Memcached相似,但具有更...
- 从0构建大型AI推荐系统:实时化引擎从工具到生态的演进
-
在AI浪潮席卷各行各业的今天,推荐系统正从幕后走向前台,成为用户体验的核心驱动力。本文将带你深入探索一个大型AI推荐系统从零起步的全过程,揭示实时化引擎如何从单一工具演进为复杂生态的关键路径。无论你是...
你 发表评论:
欢迎- 一周热门
-
-
Redis客户端 Jedis 与 Lettuce
-
高并发架构系列:Redis并发竞争key的解决方案详解
-
redis如何防止并发(redis如何防止高并发)
-
Java SE Development Kit 8u441下载地址【windows版本】
-
开源推荐:如何实现的一个高性能 Redis 服务器
-
redis安装与调优部署文档(WinServer)
-
Redis 入门 - 安装最全讲解(Windows、Linux、Docker)
-
一文带你了解 Redis 的发布与订阅的底层原理
-
Redis如何应对并发访问(redis控制并发量)
-
Oracle如何创建用户,表空间(oracle19c创建表空间用户)
-
- 最近发表
- 标签列表
-
- oracle位图索引 (74)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (59)
- oracle主从同步 (56)
- oracle 乐观锁 (53)
- redis 命令 (83)
- php redis (97)
- redis 存储 (67)
- redis 锁 (74)
- 启动 redis (73)
- redis 时间 (60)
- redis 删除 (69)
- redis内存 (64)
- redis并发 (53)
- redis 主从 (71)
- redis同步 (53)
- redis结构 (53)
- redis 订阅 (54)
- redis 登录 (62)
- redis 面试 (58)
- redis问题 (54)
- 阿里 redis (67)
- redis的缓存 (57)
- lua redis (59)
- redis 连接池 (64)