首页 > 数据库 >阿里云RDS与ECS自建mysql数据库主从同步(GTID方式)

阿里云RDS与ECS自建mysql数据库主从同步(GTID方式)

时间:2023-04-03 18:02:07浏览次数:36  
标签:slave log RDS MASTER mysql ECS GTID

 

 

1、GTID的概念
全局事务标识:global transaction identifiers;
GTID是一个事务一一对应,并且全局唯一ID;
一个GTID在一个服务器上只执行一次,避免重复执行导致数据混乱或者主从不一致;
GTID用来代替传统复制方法,不再使用MASTER_LOG_FILE+MASTER_LOG_POS开启复制。而是使用MASTER_AUTO_POSTION=1的方式开始复制;
MySQL-5.6.5开始支持的,MySQL-5.6.10后开始完善;
在传统的slave端,binlog是不用开启的,但是在GTID中slave端的binlog是必须开启的,目的是记录执行过的GTID(强制)。

2、GTID的组成
GTID = source_id:transaction_id
source_id,用于鉴别原服务器,即mysql服务器唯一的的server_uuid,由于GTID会传递到slave,所以也可以理解为源ID。
transaction_id,为当前服务器上已提交事务的一个序列号,通常从1开始自增长的序列,一个数值对应一个事务。
示例:3D598FA47-71CA-11E1-9E88-C80AJ8Y29562:97
前面的一串为服务器的server_uuid,即3D598FA47-71CA-11E1-9E88-C80AJ8Y29562,后面的97为transaction_id

3、GTID的优势
更简单的实现failover,不用以前那样在需要找log_file和log_pos;
更简单的搭建主从复制;
比传统的复制更加安全;
GTID是连续的没有空洞的,保证数据的一致性,零丢失。

4、GTID的工作原理
当一个事务在主库端执行并提交时,产生GTID,一同记录到binlog日志中;
binlog传输到slave,并存储到slave的relaylog后,读取这个GTID的这个值设置gtid_next变量,即告诉Slave,下一个要执行的GTID值;
sql线程从relay log中获取GTID,然后对比slave端的binlog是否有该GTID;
如果有记录,说明该GTID的事务已经执行,slave会忽略;
如果没有记录,slave就会执行该GTID事务,并记录该GTID到自身的binlog,在读取执行事务前会先检查其他session持有该GTID,确保不被重复执行;
在解析过程中会判断是否有主键,如果没有就用二级索引,如果没有就用全部扫描。

 

配置RDS主库

1、登录 RDS 控制台,选择目标实例。
2、配置RDS数据库账号、密码 (ecstb/ecstb) 和授权数据库rdsdb

配置ESC 从库

修改ECS从库 mysql 配置文件,在[mysqld]最后添加如下
#vi /etc/my.cnf

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 ####RDS to mysql #### server-id                       =1001                       #不可与RDS主库id相同 port                            = 3306                    replicate-do-db                 =rdsdb                       #需要同步的数据库   binlog_format                   = row                        #日志文件格式 log-bin                         = mysql-bin log-bin-index                   = mysql-bin.index relay-log                       = relay-log relay_log_index                 = relay-log.index slave-skip-errors               = all   gtid_mode                       = on                          #开启gtid模式 enforce_gtid_consistency        = on log-slave-updates               = 1 sql_mode                        = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

 保存后重启mysql服务
service mysqld restart 

systemctl start mysqld.service

5、配置主从同步
连接RDS主库,查询GTID

 

进入ECS从库,修改这个信息

1 2 3 4 5 6 mysql> stop slave; mysql> set global gtid_purged = '533ac4e6-9565-11e8-abb5-7cd30abca02e:1-3099396';   注意:设置gtid_purged值时,gtid_executed值必须为空否则报错,该值清空的方法就是reset  master命令   mysql>reset master;

 

. 执行同步

复制代码
CHANGE MASTER TO MASTER_HOST = 'rm-wz9523l****4ebzbso.mysql.rds.aliyuncs.com', MASTER_USER = 'md***s', MASTER_PASSWORD = 'tJD2****96', MASTER_PORT = 3306, MASTER_AUTO_POSITION = 1, MASTER_RETRY_COUNT = 0, MASTER_HEARTBEAT_PERIOD = 10000;

CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.001646', MASTER_LOG_POS=0; 
start slave;
show slave status\G
复制代码

 

 操作完成

 

标签:slave,log,RDS,MASTER,mysql,ECS,GTID
From: https://www.cnblogs.com/yzl042349/p/17283853.html

相关文章

  • MySQL使用DROP TABLE命令删除表怎么恢复?
    前言今天同事勿删除了一个测试环境表,因为刚好在跑重要的数据,重新跑又比较麻烦,所以尝试看能不能通过恢复数据的方式进行数据恢复,如果你也是重要数据一定要切记“不要慌,慌也没用”。百度过一些例子,哪些例子比较适合表刚刚创建后被删除,就能完全恢复,本篇文章适合那种创建很长时间,表......
  • 本地Navicat 连接阿里云esc上mysql
     登陆esc服务器上的mysql选择mysql  查看user表中的两个关键参数selectuser,hostfromuser; localhost代表本地访问。这个字段host代表访问ip限制updateusersethost="%"whereuser="root";systemctlrestartmysqld重启mysql。使权限生效......
  • mysql解锁
    概述有时候会遇到数据库死锁问题,报错锁等待超时:Lockwaittimeoutexceeded解决查看锁情况查询锁--mysql8.0--查看当前锁select*fromperformance_schema.data_locks;--锁关系select*fromperformance_schema.data_lock_waits;--mysql6select*frominforma......
  • 安装mysql.so
     1、----  cd/usr/local/src/php-5.5.34/ext/mysql/2、---- /usr/local/php5/bin/phpize3、----./configure--with-php-config=/usr/local/php5/bin/php-config--with-mysql=/usr/local/mysql4、----make&&makeinstall会生成如下内容:Installingsharedexten......
  • linux使用php动态安装模块mysqli.so(ext/mysqlnd/mysqlnd.h: 没有那个文件或目录)
     由于我先安装的php,再安装的mysql!正常过程: 1、安装mysql 2、安装phpconfigure时带–with-mysql参数现在我不想重装,因此使用phpize动态安装mysqli,php版本为php-7.2.13 1先查看php下phpize路径  得知路劲为/usr/local/php/bin/phpize2切换到php源码包目录php-7......
  • 如何在PHP7中扩展mysql,先安装php7.2。后安装mysql
     相对与PHP5,PHP7的最大变化之一是移除了mysql扩展,推荐使用mysqli或者pdo_mysql,实际上在PHP5.5开始,PHP就着手开始准备弃用mysql扩展,如果你使用mysql扩展,可能看到过这样的提示”Deprecated:mysql_connect():Themysqlextensionisdeprecatedandwillberemovedinthefu......
  • MYSQL中CAST函数
    MYSQL中CAST函数CAST函数用于将值从一种转换数据类型的方法语法:SELECTCAST(xAStype);x:要处理的数据type:要转换的数据类型,取值下方表格type取值值描述DATE将value转换成'YYYY-MM-DD'格式TIME将value转换成'HH:MM:SS'格式DATETIME将value转换......
  • C# 后台服务监控SQL Server数据库表改动并同步到MySQL数据库表
    需求将A服务器的sqlserver数据库item_mst表的数据同步到MySQL数据库Part表监控Item_mst表中item,description,overview的更改并同步到MySQL数据库 针对需求一,基本就是执行一次,单独写了个winform用来做这事针对需求二,写了个Windowsserviceapp Nuget安装 Dapper就是个ormSeril......
  • 零基础Go语言从入门到精通(数据库编程:02-Gorm 操作 MySQL 数据库)
    gin-gorm-api-example/main.goatmaster·cgrant/gin-gorm-api-example·GitHubhttps://github.com/cgrant/gin-gorm-api-example/blob/master/main.goGorm介绍ThefantasticORMlibraryforGolangGo语言的超棒的ORM类库功能强大:全功能ORM(几乎)关联(包含一个,包含多个,属......
  • mysql总结
    MyiSAM和innodbMyiSAM:非聚集索引、B+树、叶子结点保存data地址;innodb:聚集索引、B+树、聚集索引中叶子结点保存完整data,innodb非聚集索引需要两遍索引,innoDB要求表必须有主键;innodb为什么要用自增id作为主键:自增主键:顺序添加,页写满开辟新的页;非自增主键(学号等):主键值随机,有碎片......