Oracle 分片技术（oracle分片一般分多大）
mhr18 2024-10-13 03:28 56 浏览 0 评论
分区表是一个利器，在数据操作只落在某个分区，或者是需要对历史数据进行清理的时候，能发挥出巨大的作用。不过，如果是做全表的操作，比如针对所有分区进行汇总查询的时候，分区表的作用就不明显了，要是这个表达到几百 GB 甚至更大，这样的全量处理基本上数据库是撑不住的。
对于有海量数据的数据库，如果是因为表多而数据多，这时候适合使用垂直切分，即把关系紧密（比如同一模块）的表切分出来放在一个服务器上。垂直切分的最大特点就是规则简单，实施也更为方便，尤其适合各业务之间的耦合度非常低、相互影响很小、业务逻辑非常清晰的系统。在这种系统中，可以很容易做到将不同业务模块所使用的表拆分到不同的数据库中。根据不同的表来进行拆分，对应用程序的影响也更小，拆分规则也会比较简单清晰，这就是所谓的share nothing。
数据海量不是因为表多，而是因为数据量大，这时就适合进行水平切分，将同一个表中的不同数据拆分到不同的数据库中，这就是分片技术。简单来说，Oracle 的分片技术就是通过分区技术的扩展来实现的。
以前一个表的分区可以存在于不同的表空间中，现在可以存在于不同的数据库中。不同分区存在于不同数据库，这就将数据隔离了开来，并且还可以用到不同数据库主机的资源，不过相对水平切分来说，垂直切分会更复杂一些。
海量数据库可能表数量又多，记录数又多，因此多数系统会将垂直切分和水平切分联合使用，先对系统做垂直切分，再针对每一张表的情况有选择性地做水平切分，从而将整个数据库切分成一个分布式矩阵。
Sharded database（SDB）：逻辑上SDB是一个数据库，但是物理上SDB包括多个物理独立的数据库，SDB类似一个数据库池，数据库池中包括多个数据库（Shard）。目前的版本最大支持1000个Shard。
Shard:SDB包括多个物理独立的数据库，每一个数据库都称为Shard，每个Shard数据库位于不同的服务器上，它们不共享CPU、内存、存储等资源。每个Shard数据库中保存表的不同数据集，但是每个Shard中都有相同的列。Shard数据库可以是Dataguard/ADG，提供高可用性，Shard数据库（单机或者ADG）可以通过GSM deploy来自动创建，也可以将一个已经通过dbca创建好的数据库添加到SDB。
Shard catalog：这是一个Oracle数据库，用于集中存储管理SDB的配置信息，是SDB的核心。SDB配置变化，比如添加/删除shard、Global service等，都记录在Shard catalog中。如果应用查询多个 Shard 中的数据，那么由 Shard catalog 统一协调分配。我们推荐将 Shard catalog配置为Dataguard环境，这样可以提供HA高可用性。如果Shard catalog无法访问，那么只会影响一些维护操作和跨Shard访问，而不会影响单独的Shard操作（通过sharding key的查询/DML）。
Shard directors: Global Data Service（GDS）实现对分片的集中部署和管理。GSM是GDS的核心组件。GSM作为Shard director,GSM类似于监听器，将客户端对SDB的请求路由到对应的shard，负载均衡客户端的访问。
相关推荐
- 软考架构师-案例分析之Redis（软考架构师真题）
-
软考架构师考试中，Redis的知识考了很多回，从最近几年来看，案例分析经常考，有的时候单独考，有的时候和其他知识点一起考。Redis过往的考试中，考过的知识如下：1、Redis特点，涉及数据类型、持久...
- 揭秘:视频播放网站如何精准记录用户观看进度
-
在互联网蓬勃发展的当下，视频内容已毫无争议地成为人们获取信息、享受娱乐休闲时光的核心方式。据权威数据统计，全球每天有数十亿小时的视频被观看，视频流量在网络总流量中的占比逐年攀升，预计在未来几年内将超过...
- 量子级一致性!Flink+Redis全局状态管理
-
百万级实时计算任务如何实现亚毫秒级状态访问？本文揭秘Flink+Redis的量子纠缠态状态管理方案，将状态延迟降至0.3ms。引子：实时风控系统的量子跃迁//传统Flink状态管理（基于RocksD...
- 在 Mac 上运行 Redis 的 Docker 容器
-
在Mac上运行Redis的Docker容器，你可以按以下步骤操作，非常简单高效：一、前提要求已安装DockerDesktopforMac可通过终端验证Docker是否可用：d...
- 从 0 到 1:使用 Nginx + Lua 打造高性能 Web 网关
-
在大规模分布式架构中，Web网关扮演着重要角色，负责请求转发、负载均衡、限流、认证等功能。而Nginx+Lua结合可以提供：o高性能：Nginx是目前最流行的高性能Web服务器o动...
- 外贸独立站缓存设置黑科技:用错Redis比没缓存更致命
-
上周帮一个杭州卖家排查网站崩溃问题，发现这老铁把Redis缓存设置成128MB还开着持久化，服务器内存直接炸得比春节红包还彻底——"你这哪是缓存啊，根本是DDoS攻击自己！"最近Clo...
- Spring Boot3 整合 Redis，这些缓存注解你真的会用吗?
-
你在开发SpringBoot3项目时，有没有遇到过这样的困扰？随着项目功能不断增加，数据量逐渐庞大，接口响应速度变得越来越慢，用户体验直线下降。好不容易找到优化方向——引入Redis缓存...
- MySQL处理并发访问和高负载的关键技术和策略
-
MySQL处理并发访问和高负载的关键技术和策略主要包括以下几个方面：一、硬件优化1.CPU：提升CPU处理能力可以明显改善并发处理性能。根据数据库负载，考虑使用更多的CPU核心。2.内存：增加内存可以...
- druid解决高并发的数据库（druid多数据源配置 spring boot）
-
处理高并发的时候可以解决我们java一个核心问题java核心问题就是并发问题解决并发一个是redis一个是线程池的方式现在出来是个druid好像现在解决高并发的方式进行更换数据库的方式操作场景插入频繁...
- 高并发方案最全详解(8大常见方案)
-
关注△mikechen△，十余年BAT架构经验倾囊相授！大家好，我是mikechen睿哥。高并发是大型架构的核心，下面我重点来详解常见8大高并发方案@mikechen文章来源：mikechen.cc分...
- MySQL如何处理并发访问和高负载?（mysql如何处理并发访问和高负载访问）
-
MySQL在处理并发访问和高负载方面，采取了一系列关键技术和策略，以确保数据库系统在面对不断增长的并发需求时维持高效和稳定的性能。以下是对这些技术和策略的详细阐述，旨在全面解析MySQL如何处理并发访...
- Redis高可用集群详解（redis高可用方案以及优缺点）
-
Redis集群与哨兵架构对比Redis哨兵架构在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具监控master节点状态，如果master节点异常，则会做主从切换，将某一台sla...
- MCP协议重大升级!Spring AI联合阿里Higress，性能提升300%
-
引言：一场颠覆AI通信的技术革命2025年3月，MCP（ModelContextProtocol）协议迎来里程碑式升级——StreamableHTTP正式取代HTTP+SSE成为默认传输层。这一...
- 阿里三面被挂，幸获内推，历经5轮终于拿到口碑offer
-
作者：Java程序猿阿谷来源：https://www.jianshu.com/p/1c8271f03aa5每一个互联网人心中都有一个大厂梦，百度、阿里巴巴、腾讯是很多互联网人梦寐以求的地方，而我也不例...
- 来瞧瞧阿里一面都面些什么(笔试+机试)
-
絮叨说实话，能有机会面一下阿里对我来说帮助确实有蛮多，至少让我知道了自己的不足在哪，都说面试造火箭，上班拧螺丝。但就算是如此，为了生存，你也只有不停的学习，唯有光头，才能更强。哈哈起因2月28日在Bo...
欢迎 你 发表评论:
- 一周热门
- 最近发表
- 标签列表
-
- oracle位图索引 (74)
- oracle批量插入数据 (65)
- oracle事务隔离级别 (59)
- oracle主从同步 (56)
- oracle 乐观锁 (53)
- redis 命令 (83)
- php redis (97)
- redis 存储 (67)
- redis 锁 (74)
- 启动 redis (73)
- redis 时间 (60)
- redis 删除 (69)
- redis内存 (64)
- redis并发 (53)
- redis 主从 (71)
- redis同步 (53)
- redis结构 (53)
- redis 订阅 (54)
- redis 登录 (62)
- redis 面试 (58)
- redis问题 (54)
- 阿里 redis (67)
- redis的缓存 (57)
- lua redis (59)
- redis 连接池 (61)