Redis海量数据存储简述（redis存储数据类型）
mhr18 2024-10-22 12:33 42 浏览 0 评论
互联网场景下面临的主要技术问题之一是高并发大数据量。为了提高性能保护数据库通常会在数据库之上加一层缓存。目前常用的缓存是Redis，那么Redis如何存储大规模数据？如何将数据库的数据同步到Redis？Redis缓存设计要注意哪些问题？
Redis大规模数据存储通过集群实现。目前常见的集群方式有三种方案。
第一种使用Redis自带的集群技术Redis cluster。
第二种是使用代理方式，在客户端与Redis节点之间加一层代理服务目前开源的实现有codis和twemproxy。
第三种是定制客户端实现，在客户端实现节点的寻址功能。
数据库数据同步到缓存目前常见的方式有四种方式。
方式一在业务应用服务中实现。在修改数据库的同时更新缓存。
方式二通过消息队列异步更新。在业务中更新数据后发送消息，消息消费者订阅消息对缓存进行更新。
方式三通过定时任务更新。通过定时任务监控数据变更，同步更新数据到缓存。
方式三通过数据库Binlog更新。通过一些开源中间间如canal订阅数据库日志更新，解析日志然后对解析后的日志执行缓存更新操作。
缓存设计需要注意下面四个问题。
数据一致性问题。
数据库和缓存数据保持一致。目前常见的四种缓存更新模式。cache aside、read through 、write through、write behind caching。
缓存穿透问题。
目前解决缓存击穿的思路主要是过滤无效请求。如通过键的规则校验过滤恶意请求，布隆过滤器过滤无效请求。其次是缓存空结果。
缓存击穿问题。
目前解决缓存击穿的思路是对请求加全局锁，还有就是对即将过期的数据进行主动刷新。
缓存雪崩问题。
缓存雪崩目前常见的思路是设置缓存过期时间时随机设置失效时间避免缓存同时失效。还有缓存存储时划分更小的缓存区间按区间设置缓存失效时间。
缓存的使用是一个整体方案分层分布式设计。上述只是整体性描述，实际过程中的细节很多也很复杂。
相关推荐
- 【预警通报】关于WebLogic存在远程代码执行高危漏洞的预警通报
-
近日，Oracle官方发布了2021年1月关键补丁更新公告CPU（CriticalPatchUpdate），共修复了包括CVE-2021-2109（WeblogicServer远程代码执行漏洞）...
- 医院信息系统突发应急演练记录（医院信息化应急演练）
-
信息系统突发事件应急预案演练记录演练内容信息系统突发事件应急预案演练参与人员信息科参与科室：全院各部门日期xxxx-xx-xx时间20:00至24:00地点信息科记录：xxx1、...
- 一文掌握怎么利用Shell+Python实现完美版的多数据源备份程序
-
简介：在当今数字化时代，无论是企业还是个人，数据的安全性和业务的连续性都是至关重要的。数据一旦丢失，可能会造成无法估量的损失。因此，如何有效地对分布在不同位置的数据进行备份，尤其是异地备份，成为了一个...
- docker搭建系统环境（docker搭建centos）
-
Docker安装（CentOS7）1.卸载旧版Docker#检查已安装版本yumlistinstalled|grepdocker#卸载旧版本yumremove-ydocker.x...
- 基础篇:数据库 SQL 入门教程（sql数据库入门书籍推荐）
-
SQL介绍什么是SQLSQL指结构化查询语言，是用于访问和处理数据库的标准的计算机语言。它使我们有能力访问数据库，可与多种数据库程序协同工作，如MSAccess、DB2、Informix、M...
- Java21杀手级新特性!3行代码性能翻倍
-
导语某券商系统用这招，交易延迟从12ms降到0.8ms！本文揭秘Oracle官方未公开的Record模式匹配+虚拟线程深度优化+向量API神操作，代码量直降70%！一、Record模式匹配（代码量↓8...
- 一文读懂JDK21的虚拟线程（java虚拟线程）
-
概述JDK21已于2023年9月19日发布，作为Oracle标准Java实现的一个LTS版本发布，发布了15想新特性，其中虚拟线程呼声较高。虚拟线程是JDK21中引入的一项重要特性，它是一种轻量级的...
- 效率!MacOS下超级好用的Linux虚拟工具:Lima
-
对于MacOS用户来说，搭建Linux虚拟环境一直是件让人头疼的事。无论是VirtualBox还是商业的VMware，都显得过于笨重且配置复杂。今天，我们要介绍一个轻巧方便的纯命令行Linux虚拟工具...
- 所谓SaaS（所谓三维目标一般都应包括）
-
2010年前后，一个科技媒体的主编写一些关于云计算的概念性问题，就可以作为头版头条了。那时候的云计算，更多的还停留在一些概念性的问题上。而基于云计算而生的SaaS更是“养在深闺人未识”，一度成为被IT...
- ORA-00600 「25027」 「x」报错（报错0xc0000001）
-
问题现象：在用到LOB大对象的业务中，进行数据的插入，失败了，在报警文件中报错：ORA-00600:内部错误代码,参数:[25027],[10],[0],[],[],[],[],[...
- 安卓7源码编译（安卓源码编译环境lunch失败,uname命令找不到）
-
前面已经下载好源码了，接下来是下载手机对应的二进制驱动执行编译源码命令下载厂商驱动https://developers.google.com/android/drivers?hl=zh-cn搜索NGI...
- 编译安卓源码（编译安卓源码 电脑配置）
-
前面已经下载好源码了，接下来是下载手机对应的二进制驱动执行编译源码命令下载厂商驱动https://developers.google.com/android/drivers?hl=zh-cn搜索NGI...
- 360 Vulcan Team首战告捷 以17.5万美金强势领跑2019“天府杯“
-
2019年11月16日，由360集团、百度、腾讯、阿里巴巴、清华大学与中科院等多家企业和研究机构在成都联合主办了2019“天府杯”国际网络安全大赛暨2019天府国际网络安全高峰论坛。而开幕当日最激荡人...
- Syslog 日志分析与异常检测技巧（syslog发送日志配置）
-
系统日志包含有助于分析网络设备整体运行状况的重要信息。然而，理解并从中提取有效数据往往颇具挑战。本文将详解从基础命令行工具到专业日志管理软件的全流程分析技巧，助你高效挖掘Syslog日志价值。Gr...
- 从Oracle演进看数据库技术的发展（从oracle演进看数据库技术的发展的过程）
-
数据库技术发展本质上是应用需求驱动与基础架构演进的双向奔赴，如何分析其技术发展的脉络和方向？考虑到oracle数据库仍然是这个领域的王者，以其为例，管中窥豹，对其从Oracle8i到23ai版本的核...
欢迎 你 发表评论:
- 一周热门
- 最近发表
- 标签列表
-
- oracle位图索引 (74)
- oracle基目录 (50)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (53)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)