首页 > 数据库 >MySQL两阶段提交

MySQL两阶段提交

时间:2022-09-23 17:34:24浏览次数:70  
标签:binlog log 阶段 提交 MySQL 磁盘 日志 redo

bin log 

binlog 是 MySQL Server 层的日志,而不是存储引擎自带的日志,它记录了所有的 DDL 和 DML(不包含数据查询语句)语句,而且是以事件形式记录,还包含语句所执行的消耗的时间等,需要注意的是:
  • binlog 是一种逻辑日志,他里边所记录的是一条 SQL 语句的原始逻辑,例如给某一个字段 +1,注意这个区别于 redo log 的物理日志(在某个数据页上做了什么修改)。
  • binlog 文件写满后,会自动切换到下一个日志文件继续写,而不会覆盖以前的日志,这个也区别于 redo log,redo log 是循环写入的,即后面写入的可能会覆盖前面写入的。
  • 一般来说,我们在配置 binlog 的时候,可以指定 binlog 文件的有效期,这样在到期后,日志文件会自动删除,这样避免占用较多存储空间。
根据 MySQL 官方文档的介绍,开启 binlog 之后,大概会有 1% 的性能损耗,不过这还是可以接受的,一般来说,binlog 有两个重要的使用场景: MySQL 主从复制时:在主机上开启 binlog,主机将 binlog 同步给从机,从机通过 binlog 来同步数据,进而实现主机和从机的数据同步。 MySQL 数据恢复,通过使用 mysqlbinlog 工具再结合 binlog 文件,可以将数据恢复到过去的某一时刻。

 

redo log 

我们都知道,事务的四大特性里面有一个是持久性,即只要事务提交成功,那么对数据库做的修改就被永久保存下来了,写到磁盘中了,怎么做到的呢?其实我们很容易想到是在每次事务提交的时候,将该事务涉及修改的数据页全部刷新到磁盘中,一旦写到磁盘中,就不怕数据丢失了。   但是要是每次都这么搞,数据库就不知道慢到哪里去了!因为 Innodb 是以页为单位进行磁盘交互的,而一个事务很可能只修改一个数据页里面的几个字节,这个时候将完整的数据页刷到磁盘的话,不仅效率低,也浪费资源。效率低是因为这些数据页在物理上并不连续,将数据页刷到磁盘会涉及到随机 IO。   有鉴于此,MySQL 设计了 redo log,在 redo log 中只记录事务对数据页做了哪些修改。那有人说,写 redo log 不就是磁盘 IO 吗?而写数据到磁盘也是磁盘 IO,既然都是磁盘 IO,那干嘛不把直接把数据写到磁盘呢?还费这事!此言差矣。   写 redo log 跟写数据有一个很大的差异,那就是 redo log 是顺序 IO,而写数据涉及到随机 IO,写数据需要寻址,找到对应的位置,然后更新/添加/删除,而写 redo log 则是在一个固定的位置循环写入,是顺序 IO,所以速度要高于写数据。   redo log 本身又分为:
  • 日志缓冲(redo log buffer),该部分日志是易失性的。
  • 重做日志(redo log file),这是磁盘上的日志文件,该部分日志是持久的。 
MySQL 每执行一条 DML 语句,先将记录写入 redo log buffer,后续在某个时间点再一次性将多个操作记录写到 redo log file,这种先写日志再写磁盘的技术就是 MySQL 里经常说到的 WAL(Write-Ahead Logging) 技术(预写日志)。

 

两阶段提交

从下图中可以看出,在最后提交事务的时候,有 3 个步骤:
  • 写入 redo log,处于 prepare 状态。
  • 写 binlog。
  • 修改 redo log 状态变为 commit。
由于 redo log 的提交分为 prepare 和 commit 两个阶段,所以称之为两阶段提交。   那么按照前面说的两阶段提交就能解决问题吗? 我们来看如下三种情况:   情况一:一阶段提交之后崩溃了,即写入 redo log,处于 prepare 状态 的时候崩溃了,此时: 由于 binlog 还没写,redo log 处于 prepare 状态还没提交,所以崩溃恢复的时候,这个事务会回滚,此时 binlog 还没写,所以也不会传到备库。   情况二:假设写完 binlog 之后崩溃了,此时: redolog 中的日志是不完整的,处于 prepare 状态,还没有提交,那么恢复的时候,首先检查 binlog 中的事务是否存在并且完整,如果存在且完整,则直接提交事务,如果不存在或者不完整,则回滚事务。   情况三:假设 redolog 处于 commit 状态的时候崩溃了,那么重启后的处理方案同情况二。 由此可见,两阶段提交能够确保数据的一致性。                                                     
           

标签:binlog,log,阶段,提交,MySQL,磁盘,日志,redo
From: https://www.cnblogs.com/wenbochang/p/16723505.html

相关文章

  • 编程语言界的丐帮 C#.NET FRAMEWORK 4.6 EF 连接MYSQL
    1.nuget引用 EntityFramework、和 MySql.Data.EntityFramework。  MySql.Data这个库视情况。2.新建实体类:usingSystem;usingSystem.ComponentModel.DataAnnot......
  • MySQL面试题
    目录Count(*),Count(1),Count(字段)哪个性能更高?Count(*),Count(1),Count(字段)哪个性能更高?count的作用统计符合查询条件的记录中,函数指定的参数不为NULL的记录有多......
  • JavaWeb--MySQL约束、数据库设计、多表查询、事务--2022年9月22日
    第一节  约束1、概念A、约束是什么约束是作用于表中列上的规则,用于限制加入表的数据约束的存在保证了数据库中数据的正确性、......
  • Kettle 添加Mysql驱动后仍提示连接错误
    错误连接数据库[kettle_mysql]:org.pentaho.di.core.exception.KettleDatabaseException:ErroroccurredwhiletryingtoconnecttothedatabaseDriverclass'o......
  • Mysql查询无结果返回值问题
    Mysql查询无结果返回值问题执行下面sql语句SELECTCustomerIDFROMcustomerWHERECustomerID=10;运行结果:什么是N/A?N/A:NotAvailableORNotApplicable......
  • Linux(CentOS) Mysql 8.0.30 安装(多源安装)
    Linux(CentOS)Mysql8.0.30安装(多源安装)安装命令根据实际部署情况修改调整,CentOS一般选择通用版本RedHatEnterpriseLinux7本文档使用wget下载,也可以自主下载......
  • MySQL维护之哪些命令可以查看锁
    在MySQL实战之死锁与解决方案-池塘里洗澡的鸭子-博客园(cnblogs.com)和MySQL中锁机制实现原理-池塘里洗澡的鸭子-博客园(cnblogs.com)中对查看锁的信息都有......
  • mysql 相关内存参数
    1.key_buffer_size用于MyISAMtable缓存indexblocks,allthreads可用。2.bulk_insert_buffer_sizeMyISAM 使用特殊的tree-like缓存来加速向一个非空表insert...se......
  • redis和mysql(区别和联系)
    redis和mysql一般都知道mysql是数据库的,可redis也是数据库,两者区别是mysql:关系型数据库,1⃣️将数据存放在硬盘中,存取速度较慢 2⃣️ 永久存放redis:非关系型数据库(缓存数......
  • STS用Maven写一个登录页面 - 将MySQL和STS连接起来
     准备用户名数据库创建方法前面已介绍,不重复说明。创建方法:https://www.cnblogs.com/smart-zihan/p/15041013.html通过MySQLWorkbench添加。  连接MySQL与STS......