首页 > 数据库 >MySQL主从同步原理

MySQL主从同步原理

时间:2022-10-12 11:44:51浏览次数:50  
标签:主库 Bin 同步 Log MySQL 从库 主从

1 MySQL主从同步实现方式
MySQL主从同步是基于记录原始sql语句的Bin Log实现
Bin Log的三种日志格式包括:

  • Statement 记录原始SQL语句,会导致更新时间与原库不一致。比如 update_time=now()
  • Row 记录每行数据的变化,保证了数据与原库一致,缺点是数据量较大。
  • Mixed Statement和Row的混合模式,默认采用Statement模式,涉及日期、函数相关的时候采用Row模式,既减少了数据量,又保证了数据一致性。
    可以通过binlog_format配置参数指定

常见的主从同步架构有一主多从和双主多从

2 MySQL主从同步的作用

  • 1 读写分离,提升数据库性能
  • 2 容灾备份,当主服务器失效时,从服务器提供服务,提高可靠性与可用性
  • 3 冗余备份,主服务器数据损坏丢失时,从服务器保存备份

一主多从架构:
一般是主库负责所有读写请求,而从库只负责容灾恢复和冗余备份。
如果做了读写分离的话,主库负责写请求,从库负责读请求,可以提升数据库性能。

双主多从架构:
一般是主库1负责所有读写请求,主库2不对外提供服务,只用来容灾恢复。
相比一主多从架构,双主多从架构可以减少宕机时间,更快恢复数据库可用状态。

3 主从同步原理

  • 1 当主库数据发生变更时,写入本地Bin Log文件
  • 2 从库IO线程发起dump主库Bin Log文件的请求
  • 3 主库IO线程推送Bin Log文件到从库中
  • 4 从库IO线程把Bin Log内容写入本地的Relay Log文件中
  • 5 从库SQL线程读取Relay Log文件内容
  • 6 从库SQL线程重新执行一遍SQL语句

4 主从同步延迟
主从同步最常遇到的问题就是主从同步延迟,可以通过在从库上执行show slave status命令查看延迟时间,Seconds_Behind_Master表示延迟的秒数。

5 主从同步延迟的原因

  • 1 从库机器性能较差
    主库负责所有读写请求,从库只用来备份,会用性能较差的机器,执行时间自然较慢。
  • 2 从库压力更大
    读写分离后,主库负责写请求,从库负责读请求。
    互联网应用一般读请求更多,所以从库读压力更大,占用更多CPU资源。
  • 3 网络延迟
    当主库的Bin Log文件往从库上发送时,可能产生网络延迟,也会导致从库数据跟不上。
  • 4 主库有大事务
    当主库上有个大事务需要执行5分钟,把Bin Log文件发送到从库,从库至少也需要执行5分钟,所以这时候从库就出现了5分钟的延迟。

6 主从同步延迟解决方案

  • 1 从库机器性能较差
    把从库换成跟主库同等规格的机器。
  • 2 从库压力更大
    多搞几台从库,分担读请求压力。
  • 3 网络延迟
    联系运维或者云服务提供商解决。
  • 4 主库有大事务
    把大事务分割成小事务执行,大事务不但会产生从库延迟,还可能产生死锁,降低数据库并发性能,所以尽量少用大事务。

7 提升主从同步性能
7.1 从库开启多线程复制
在主从同步的最后两步使用多线程,修改配置 slave_parallel_workers=4,代表开启4个复制线程。

7.2 修改同步模式,改为异步
主从同步共有三种复制方式:

  • 1 全同步复制
    当主库执行完一个事务,并且所有从库都执行完该事务后,才给客户端返回成功。
  • 2 半同步复制
    至少有一个从库执行完成后,就给客户端返回成功。
  • 3 异步复制
    主库执行完后,立即返回成功,不关心从库是否执行完成。
    如果对数据安全性要求没那么高,可以把同步模式改成半同步复制或者异步复制。

7.3 修改从库Bin Log配置
修改sync_binlog配置:
sync_binlog=0 ,表示写binlog不立即刷新磁盘,由系统决定什么时候刷新磁盘。
sync_binlog=1,每次写binlog都刷新磁盘,安全性高,性能差。
sync_binlog=N,写N次binlog才刷新磁盘。

从库对数据安全性要求没那么高,可以设置sync_binlog=0。

修改innodb_flush_log_at_trx_commit配置:
innodb_flush_log_at_trx_commit=0,每隔一秒钟,把事务日志刷新到磁盘。
innodb_flush_log_at_trx_commit=1,每次事务都刷新到磁盘。
innodb_flush_log_at_trx_commit=2,每次事务都不主动刷新磁盘,由系统决定什么时候刷新磁盘。

从库对数据安全性要求没那么高,可以设置innodb_flush_log_at_trx_commit=2。

标签:主库,Bin,同步,Log,MySQL,从库,主从
From: https://www.cnblogs.com/ricc/p/16783946.html

相关文章

  • mysql 数据库字段类型大全
    数值tinyint1.十分小的数据,占用1个字节,有符号的范围是-128-127,无符号的范围是从0到255的整型数据2.java类型Integersmallint1.较小的数据,占用2个字节2.java类型I......
  • mysql将查询结果导出到txt/csv文件
    日常工作中,我们经常需要将查询结果保存出来,然后放在数据处理软件中跑分析,或者和小组同学共享数据协同处理。好在MySQL/MariaDB内置查询结果保存工具,只要注意一些细节和......
  • MySQL中dd::columns表结构转table过程以及应用
    GreatSQL社区原创内容未经授权不得随意使用,转载请联系小编并注明来源。GreatSQL是MySQL的国产分支版本,使用上与MySQL一致。一、MySQL的dd表介绍二、代码跟踪三、知识......
  • 【已解决】Navicat 进入 MySQL 提示错误:Table 'performance_schema.session_variables
    一、问题原因二、试错以为是MySQL服务启动有问题,重新启动了下服务,仍然没有解决。三、解决找到MySQL安装目录,进入bin文件夹下,在bin文件夹下运行命令行窗口,输入以下命令......
  • MySQL事务篇:ACID原则、事务隔离级别及事务机制原理剖析
    引言众所周知,​​MySQL​​数据库的核心功能就是存储数据,通常是整个业务系统中最重要的一层,可谓是整个系统的“大本营”,因此只要​​MySQL​​存在些许隐患问题,对于整个系统......
  • Mysql日志篇
    l mysql日志(1) 错误日志错误日志是MySQL中最重要的日志之一,它记录了当mysqld启动和停止时,以及服务器在运行过程中发生任何严重错误时的相关信息。当数据库出现任......
  • MYSQL 忘记密码
    1.关闭mysql服务2.使用cd指令切换到mysql的bin目录使用mysqld--console--skip-grant-tables--shared-memory如下图.3.打开一个新的cmd窗口,mysql-uroot-p发......
  • mysql安装以及配置
    mysql安装执行命令aptlist|grep"mysql"查找mysql软件包找到软件包,执行aptinstallmysql-server-8.0/focal-security安装mysql执行mysql进入mysqlType'help;'or......
  • 27、JAVA进阶——线程同步和线程间的通信
    ✅作者简介:热爱国学的Java后端开发者,修心和技术同步精进。......
  • MySQL动态执行字符串
    需求表中存有按天维度字符串表达式字段,需要取出,然后计算出字符串表达式的结果,最后得到一个结果集,并且保留结果例:表达式字段值为value>1,需要先replace掉value为实际......