Mysql复制数据一致性解决方案（mysql 数据复制）
mhr18 2024-10-12 04:56 17 浏览 0 评论
mysql数据库现在这么流行，其复制组件功不可没，虽然其它类型的关系型数据库也有复制功能，向oracle，db2但是其复制组件没有Mysql数据库的复制那么灵活，简便，而且mysql开源，开发着可以很容易的就开发出第三方mysql数据库复制中间件，比较有名的像阿里的DTS。
言归正传，下面就介绍一下mysql的复制的模式，主要分为以下三种种
- 异步复制
mysql数据库默认的复制方式为异步模式。主库在执行完客户端提交的事务后会立即将结果返给给客户端，不关心从库是否已经接收并处理过这些事物。这种模式，主从之间因为延迟，导致数据存在差异，当主库宕机之后，从库接管之后，会导致部分数据丢失，这在某些业务场景是不可接受的。 - 全同步
指当主库执行完一个事务，所有的从库都执行了该事务才返回给客户端。这种全同步模式需要等待所有从库执行完该事务才能返回，会导致复制性能受到影响，并且数据库的TPS也会受到影响。 - 半同步复制
介于异步复制和全同步复制之间，主库在执行完客户端提交的事务后不是立刻返回给客户端，而是等待至少一个从库接收到并写到relay log中才返回给客户端。相对于异步复制，半同步复制提高了数据的安全性。
那是不是配置了数据库的半同步，当发生主从切换之后，业务数据一定不会丢失呢，今天就重点说说半同步复制
先看一下mysql5.6版本的半同步复制原理图
大家有没有从图中发现问题，没错，用户提交的事物在主库“storage commit”，就是说事物已经在主库落地了。然后才进入等待从库去执行该事物，从库执行成功，然后给客户端请求返回成功。
如果主库在“waiting slave dump”阶段宕机了，大家想想会发生什么事情，没错，主库和从库之前就会发生数据不一致。主库比从库多业务数据。
试想一下，主机宕机了，从库接管业务之后，应用已经读到了的数据，在从库删读不到了，因为之前的事物失败了，业务需要重新在从库上做事物，这时候把主库恢复之后，启动主从复制，复制就会报错，因为有主键冲突。这就是mysql半同步的弊端。
在mysql5.7版本修改半同步的流程，解决了在5.6版本中的数据不一致问题，其流程如下所示
从图中可以看到，mysql调整了"Engine commit"的执行顺序，将"Waiting Slave dump"被调整到"Storage Commit"之前，主库将每个事务写入binlog，传递到slave刷新到磁盘，同时主库提交事务。master等待slave反馈收到中继日志，只有收到ACK后master才将commit OK结果反馈给客户端。
相关推荐
- SQL入门知识篇（sql入门新手教程视频）
-
一、什么是数据库？什么是SQL?1、数据库：存放数据，可以很多人一起使用2、关系数据库：多张表+各表之间的关系3、一张表需要包含列、列名、行4、主键：一列（或一组列），其值能够唯一区分表中的每个行。5...
- postgresql实现跨库查询-dblink的妙用
-
技术导语：用惯了oracle的dblink，转战postgresql，会一时摸不着头脑。本期就重点详细讲解postgresql如何安装dblink模块及如何使用dblink实现跨库查询。安装cont...
- Oracle VM VirtualBox虚拟机软件（oracle vm virtualbox win10）
-
OracleVMVirtualBox是一款完全免费的虚拟机软件，下载银行有提供下载，软件支持安装windows、linux等多个操作系统，让用户可以在一台设备上实现多个操作系统的操作。同时软件有着...
- 开源 SPL 轻松应对 T+0（开源srs）
-
T+0问题T+0查询是指实时数据查询，数据查询统计时将涉及到最新产生的数据。在数据量不大时，T+0很容易完成，直接基于生产数据库查询就可以了。但是，当数据量积累到一定程度时，在生产库中进行大数据...
- 中小企业佳选正睿ZI1TS4-4536服务器评测
-
随着科技的不断发展，各行各业对于数据使用越加频繁，同时针对服务器的选择方面也就越来越多样化和细分化。那么对于我们用户来说，如何选择符合自身业务需求和最优性价比的产品呢？笔者将通过刚刚购买的这台服务器的...
- MFC转QT:Qt基础知识（mfc和qt的区别）
-
1.Qt框架概述Qt的历史和版本Qt是一个跨平台的C++应用程序开发框架，由挪威公司Trolltech（现为QtCompany）于1991年创建。Qt的发展历程：1991年：Qt项目启动1995年...
- 数据库，QSqlTableModel（数据库有哪些）
-
QMYSQL——mysqlQSQLITE——sqliteQOICQ——orcale所需头文件.pro增加sql#include<QSqlDatabase>#include<Q...
- python通过oledb连接dbf数据库（python连接jdbc）
-
起因：因为工作需要，需要读取dbf文件和系统数据中数据进行校对，因为知道dbf文件可以用sql查询，所以想能不能像mysql/oracle那样连接，再调用执行sql方法，通过一系列百度，尝试，最终通过...
- Excel常用技能分享与探讨(5-宏与VBA简介 VBA与数据库)
-
在VBA（VisualBasicforApplications）中使用数据库（如Access、SQLServer、MySQL等）具有以下优点，适用于需要高效数据管理和复杂业务逻辑的场景：1....
- Excel常用技能分享与探讨(5-宏与VBA简介 VBA与数据库-二)
-
以下是常见数据库软件的详细配置步骤，涵盖安装、驱动配置、服务启动及基本设置，确保VBA能够顺利连接：一、MicrosoftAccess适用场景：小型本地数据库，无需独立服务。配置步骤：安装Acces...
- Windows Docker 安装（docker安装windows容器）
-
Docker并非是一个通用的容器工具，它依赖于已存在并运行的Linux内核环境。Docker实质上是在已经运行的Linux下制造了一个隔离的文件环境，因此它执行的效率几乎等同于所部署的L...
- Windows下安装Ubuntu虚拟机方法（windows下安装ubuntu20）
-
在Windows下安装Ubuntu虚拟机。选择使OracleVMVirtualBox安装Ubuntu虚拟机。1.下载和安装OracleVMVirtualBox：访问OracleVMVir...
- java入门教程1 - 安装和配置(win和linux)
-
windows安装和配置安装javahttps://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html目前大部分项目的...
- Centos7 安装Tomcat8服务及配置jdk1.8教程
-
1、下载jdk1.8压缩包下载地址：https://www.oracle.com/java/technologies/javase/javase8-archive-downloads.htmltom...
- 全网最完整的免费java教程讲义(一)——java配置和安装
-
一，安装Java1)安装JDK要学习和使用java，首先需要安装JDK(JavaDevelopemntKit)，相当于java安装包。Java的下载页在甲骨文官网上：https://www.or...
欢迎 你 发表评论:
- 一周热门
- 最近发表
-
- SQL入门知识篇（sql入门新手教程视频）
- postgresql实现跨库查询-dblink的妙用
- Oracle VM VirtualBox虚拟机软件（oracle vm virtualbox win10）
- 开源 SPL 轻松应对 T+0（开源srs）
- 中小企业佳选正睿ZI1TS4-4536服务器评测
- MFC转QT:Qt基础知识（mfc和qt的区别）
- 数据库，QSqlTableModel（数据库有哪些）
- python通过oledb连接dbf数据库（python连接jdbc）
- Excel常用技能分享与探讨(5-宏与VBA简介 VBA与数据库)
- Excel常用技能分享与探讨(5-宏与VBA简介 VBA与数据库-二)
- 标签列表
-
- oracle位图索引 (63)
- oracle批量插入数据 (62)
- oracle事务隔离级别 (53)
- oracle 空为0 (50)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)