云数据库高可用——Series2:MySQL如何保证主从一致

简介: 云数据库高可用——Series2:MySQL如何保证主从一致

引言

通过上一节的学习,我们知道在mysql一主一从集群中,是依靠数据库的Binlog(二进制日志)来进行主从同步的,主节点执行完一个DDL、DML语句后,会将此语句记录到主库的binlog中,然后由IO线程将日志传输到从库,由SQL线程来replay binlog,从而实现主从同步。但是,这种机制是100%可靠的么?会不会有例外情况?大家可以思考一下下面几种情况,是否会造成主备不一致:
(1)一张表上存在多个索引,在主库上执行delete from tab1 limit 1语句,从库上是否会删除了同一条记录?我们知道如果表上有多个索引,在不同的节点上执行时有可能使用到不同的索引,最终引起的结果是可能会删除不同的记录。
(2)主库上执行insert into t1 values(now())语句,从库在1分钟后才执行此条记录,从库上插入的时间与主库是一致的么?

binlog深入了解

在回答上面两个问题之前,我们首先深入了解一下数据库的binlog,到底binlog里记录了哪些信息呢。

delete的binlog解析

首先,我们创建了一张测试表,表结构如下图:

image.png
图1:测试表tab1的表结构

接着,向表内插入4条记录:

image.png
图2:测试表tab1内的4条记录

执行语句delete from tab1 limit 1,然后使用mysqlbinlog工具来解析一下binlog:
图3:delete的binlog解析结果.png

图3:delete的binlog解析结果

我们可以看到,虽然我们执行时没有where条件,但是在binlog里自动加上了where条件@1=1 @2=’abc’,这样当这条记录传到从机上时,便可以保证删除了同一条记录。

insert的binlog解析

另外,我们再新建一张表,然后执行insert into tab2(1,now()),然后再用mysqlbinlog来看下binlog里的内容:
图4:insert的binlog解析结果.png

图4:insert的binlog解析结果

原来binlog在记录sql语句的同时,多记录了一条SET TIMESTAMP=1586956197的语句,用SET TIMESTAMP命令约定了接下来的now()函数的返回时间。因此,不论这个binlog是1分钟之后被备库执行,还是3天后用来恢复这个库的备份,这个insert语句插入的行,值都是固定的。也就是说,通过这条SET TIMESTAMP命令,MySQL就确保了主备数据的一致性。

binlog小结

通过上面的分析,我们了解了binlog里不光记录了sql执行语句,同时,也记录了一些上下文信息。因此,我们在使用binlog做数据恢复时,不能只执行里面的sql语句,要连同上下文的信息一起执行。正确用binlog来恢复数据的标准做法是,用mysqlbinlog工具解析出来,然后把解析结果整个发给MySQL执行。

总结

此文只是给大家简单介绍了一下mysql binlog的原理,实际上binlog还有许多本文未讲到的东西,若感兴趣可以查看相关的资料进行学习。
本文用两节的内容给大家介绍了mysql的主从实现原理、mysql如何保证主从一致。

相关内容

云数据库高可用——Series1:MySQL主从复制原理背景

作者:张西来

阿里云智能GTS-SRE团队技术服务经理

曾就职于某国产数据库厂商,有10多年数据库技术支持工作经验,精通多款数据库产品,为国内多个大中银行核心数据库提供技术支持。目前就职于阿里云智能GTS-SRE团队,负责云数据库的高效运维和管理工作。

我们是阿里云智能全球技术服务-SRE团队,我们致力成为一个以技术为基础、面向服务、保障业务系统高可用的工程师团队;提供专业、体系化的SRE服务,帮助广大客户更好地使用云、基于云构建更加稳定可靠的业务系统,提升业务稳定性。我们期望能够分享更多帮助企业客户上云、用好云,让客户云上业务运行更加稳定可靠的技术,您可用钉钉扫描下方二维码,加入阿里云SRE技术学院钉钉圈子,和更多云上人交流关于云平台的那些事。

image.png

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
3月前
|
缓存 关系型数据库 BI
使用MYSQL Report分析数据库性能(下)
使用MYSQL Report分析数据库性能
160 3
|
3月前
|
关系型数据库 MySQL 数据库
自建数据库如何迁移至RDS MySQL实例
数据库迁移是一项复杂且耗时的工程,需考虑数据安全、完整性及业务中断影响。使用阿里云数据传输服务DTS,可快速、平滑完成迁移任务,将应用停机时间降至分钟级。您还可通过全量备份自建数据库并恢复至RDS MySQL实例,实现间接迁移上云。
|
3月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS费用价格:MySQL、SQL Server、PostgreSQL和MariaDB引擎收费标准
阿里云RDS数据库支持MySQL、SQL Server、PostgreSQL、MariaDB,多种引擎优惠上线!MySQL倚天版88元/年,SQL Server 2核4G仅299元/年,PostgreSQL 227元/年起。高可用、可弹性伸缩,安全稳定。详情见官网活动页。
783 152
|
3月前
|
关系型数据库 MySQL 分布式数据库
阿里云PolarDB云原生数据库收费价格:MySQL和PostgreSQL详细介绍
阿里云PolarDB兼容MySQL、PostgreSQL及Oracle语法,支持集中式与分布式架构。标准版2核4G年费1116元起,企业版最高性能达4核16G,支持HTAP与多级高可用,广泛应用于金融、政务、互联网等领域,TCO成本降低50%。
|
3月前
|
关系型数据库 分布式数据库 数据库
阿里云数据库收费价格:MySQL、PostgreSQL、SQL Server和MariaDB引擎费用整理
阿里云数据库提供多种类型,包括关系型与NoSQL,主流如PolarDB、RDS MySQL/PostgreSQL、Redis等。价格低至21元/月起,支持按需付费与优惠套餐,适用于各类应用场景。
|
3月前
|
SQL 关系型数据库 MySQL
Mysql数据恢复—Mysql数据库delete删除后数据恢复案例
本地服务器,操作系统为windows server。服务器上部署mysql单实例,innodb引擎,独立表空间。未进行数据库备份,未开启binlog。 人为误操作使用Delete命令删除数据时未添加where子句,导致全表数据被删除。删除后未对该表进行任何操作。需要恢复误删除的数据。 在本案例中的mysql数据库未进行备份,也未开启binlog日志,无法直接还原数据库。
|
3月前
|
Ubuntu 安全 关系型数据库
安装与配置MySQL 8 on Ubuntu,包括权限授予、数据库备份及远程连接指南
以上步骤提供了在Ubuntu上从头开始设置、配置、授权、备份及恢复一个基础但完整的MySQL环境所需知识点。
437 7
|
3月前
|
缓存 监控 关系型数据库
使用MYSQL Report分析数据库性能(上)
最终建议:当前系统是完美的读密集型负载模型,优化重点应放在减少行读取量和提高数据定位效率。通过索引优化、分区策略和内存缓存,预期可降低30%的CPU负载,同时保持100%的缓冲池命中率。建议每百万次查询后刷新统计信息以持续优化
237 6
|
3月前
|
缓存 监控 关系型数据库
使用MYSQL Report分析数据库性能(中)
使用MYSQL Report分析数据库性能
164 1
|
3月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎,提供高性价比、稳定安全的云数据库服务,适用于多种行业与业务场景。

推荐镜像

更多