【MySQL】MySQL主从复制延迟原因及处理思路

标签：主库 主从复制 SQL MySQL DDL 从库 延迟

  MySQL主从复制延迟原因及处理思路

• 主库DML请求频繁（TPS较大）

主库写请求较多，有大量insert、delete、update并发操作，短时间产生了大量的binlog 【原因分析】 主库并发写入数据，而从库SQL Thread为单线程应用日志，很容易造成relaylog堆积，产生延迟。 【解决思路】 做sharding，通过scale out打散写请求。或考虑升级到MySQL 5.7+，开启基于逻辑时钟的并行复制。  

• 主库执行大事务

大量导入数据，INSERT INTO $tb1 SELECT * FROM $tb2、LOAD DATA INFILE等;比如UPDATE、DELETE了全表等 【原因分析】 假如主库花了5分钟更新一张大表，在主从库配置相近的情况下，从库也需要花几乎同样的时间更新这张大表，此时从库延迟开始堆积，后续的events无法更新。 【解决思路】 拆分大事务，及时提交。  

• 主库对大表执行DDL语句

现象和主库执行大事务相近；检查Exec_Master_Log_Pos一直未动，也有可能是在执行DDL。 【原因分析】 1、DDL未开始，被阻塞，SHOW SLAVE STATUS检查到Slave_SQL_Running_State为waiting for table metadata lock，且Exec_Master_Log_Pos不变。 2、DDL正在执行，SQL Thread单线程应用导致延迟增加。Slave_SQL_Running_State为altering table，Exec_Master_Log_Pos不变 【解决思路】 通过processlist或information_schema.innodb_trx来找到阻塞DDL语句的查询，干掉该查询，让DDL正常在从库执行。 DDL本身造成的延迟难以避免，建议考虑： ① 业务低峰期执行 ② set sql_log_bin=0后，分别在主从库上手动执行DDL（此操作对于某些DDL操作会造成数据不一致，请务必严格测试）  

• 主库与从库配置不一致

【原因分析】 硬件上：主库实例服务器使用SSD，而从库实例服务器使用普通SAS盘、cpu主频不一致等 配置上：如RAID卡写策略不一致，OS内核参数设置不一致，MySQL落盘策略不一致等 【解决思路】 尽量统一DB机器的配置（包括硬件及选项参数） 甚至对于某些OLAP业务，从库实例硬件配置高于主库等  

• 表缺乏主键或唯一索引

binlog_format=row的情况下，如果表缺乏主键或唯一索引，在UPDATE、DELETE的时候可能会造成从库延迟骤增。 此时Slave_SQL_Running_State为Reading event from the relay log。 并且SHOW OPEN TABLES WHERE in_use=1的表一直存在。 Exec_Master_Log_Pos不变。 mysqld进程的cpu几近100%（无读业务时），io压力不大 【原因分析】 做个极端情况下的假设，主库更新一张500w表中的20w行数据，该update语句需要全表扫描 而row格式下，记录到binlog的为20w次update操作，此时SQL Thread重放将特别慢，每一次update可能需要进行一次全表扫描 【解决思路】 检查表结构，保证每个表都有显式自增主键，并建立合适索引。  

• 从库自身压力过大

【原因分析】 从库执行大量select请求，或业务大部分select请求被路由到从库实例上，甚至大量OLAP业务，或者从库正在备份等。 此时可能造成cpu负载过高，io利用率过高等，导致SQL Thread应用过慢。 【解决思路】 建立更多从库，打散读请求，降低现有从库实例的压力。    

标签：主库,主从复制,SQL,MySQL,DDL,从库,延迟
From： https://www.cnblogs.com/sxdcgaq8080/p/17672283.html