MySQL读写分离
1、读写分离的目的
数据库负载均衡:
当数据库请求增多时,单例数据库不能够满足业务 需求。需要进行数据库实例的扩容。多台数据库同时相 应请求。也就是说需要对数据库的请求,进行负载均衡 但是由于数据库服务特殊原因,数据库扩容基本要 求为:数据的一致性和完整性。所以要保证多台数据库 实例的数据一致性和完整性,以MySQL为例来说,官方 提供了主从复制机制。读写分离:
数据库的负载均衡不同于其他服务的负载均衡,数 据要求一致性。基于主从复制的基础上,常见的数据库 负载均衡使用的是读写分离方式。写入主数据库,读取 到从数据库。可以认为数据库读写分离,是一种特殊的 负载均衡实现。 实际业务中,读写分离存在的一个问题,不够实时性。 对于要求实时性高的业务 ①缓存 写主库 写缓存 读缓存 ②可以读主 ③添加完数据之后,有一个跳转等待的时间(5s),数 据正在审核中2、读写分离常见的实现方式
①业务代码的读写分离
需要在业务代码中,判断数据操作是读还是写,读连接 从数据服务器操作,写连接主数据库服务器操作 以当前LNMP为例,需要通过PHP代码实现读写分离。②中间件代理方式的读写分离
在业务代码中,数据库的操作,不直接连接数据库,而 是先请求到中间件服务器(代理) 由代理服务器,判断是读操作去从数据服务器,写操作 去主数据服务器, 也就是如下图示架构:![](https://i-blog.csdnimg.cn/direct/76dbe4351e36479fb29d7de7f38e20e7.png)
MySQL读写分离案列实现
0、搭建M-S复制: 主从复制的原理 :主服务器开启bin-log(记录了写操 作) 从服务器获取到主服务器的bin-log 记录到relaylog中。从服务器在通过异步的线程方式,对于relay-log 进行重放操作。 1、master配置 ①在master服务器授权,slave服务器replication slave权限 slave是通过MySQL连接登录到master上来读取二进制 日志的,因此需要在 master上给slave配置权限 mysql > grant replication slave on *.* to 'slave'@'192.168.17.%'identified by '123456'; ②master服务器打开bin-log日志,并标识server-id shell > vim /etc/my.cnf 配置文件内容 [mysqld] log-bin = mysql-index server-id = 1 注意重启mysql使配置生效 ③制作一个完整的备份( 如果确认主从的数据库,默认开始数据是一致的,可以 不做备份 ) shell > mysqldump -uroot -p'123456' --alldatabases > /root/mysql.sql ④查看master上的bin-log及其position位置 mysql > show master status; 查看并记录File的值,Position的值。之后需要在从服务 器上,指向这些信息 File 记录到的bin-log日志文件名称 Position bin-log日志文件所记录的位置 2、slave配置 ①恢复备份文件( 如果slave和master的数据本身就是相同的,可以不选择 备份和导入 ) ②配置server-id,标识服务器 shell > vim /etc/my.cnf 配置文件内容 [mysqld] server-id=2 由于是克隆获取的MySQL实例,所以auto.conf里记录的 UUID一样,需要删除/usr/local/mysql/data/auto.conf 文件,否则主从无法识别互相身份,重启自动生成新的 即可。 ③配置slave replication mysql > stop slave; mysql> change master to master_host='192.168.17.101' ,master_user='sl ave1' ,master_password='123456' ,master_log_fi le='mysql-bin.000002' ,master_log_pos=333; mysql > start slave; 参数说明 master_host 主master的IP master_user 主master允许登录,拥有replication slave权限 master_password 用户的密码 需要通过mysql > show master status; 在master执行 master_log_file 主master记录的bin-log日志文件名称 master_log_pos 主master记录的bin-log日志文件对 应的位置 ④启动replication,并检查结果 mysql > show slave status\G; 查看到两个yes,主从复制成功。否则,查看显示最下面 信息,通过error信息进行排查问题。简单业务代码实现
示例语法代码:![](https://i-blog.csdnimg.cn/direct/f83831ac2bff4029bb384be0827c3852.png)
![](https://i-blog.csdnimg.cn/direct/8b9822d2dc364dfd97a9f1ca5abb9264.png)
![](https://i-blog.csdnimg.cn/direct/d955aff1ed8a4c8188cfefda00990560.png)
框架配置实现读写分离
①通过查看thinkphp5手册找到处理方案 ②修改项目配置文件 (一定要先去确定主从数据库的数据一致(tp5shop), 用户名称和密码可以进行登录使用) shell > vim /usr/local/nginx/html/tp5shop/application/da tabase.php 配置文件示例return [
// 数据库类型
'type' => 'mysql' ,
// 服务器地址
// 1、主从数据库的连接地址 主在前 从在后
'hostname' => '192.168.17.100,192.168.17.105' ,
// 2、主从数据库的名称、用户、密码一样的话,只 配置一份即可。如果不一样,按照先后顺序,逗号分隔
// 数据库名
'database' => 'tp5shop' ,
// 用户名
'username' => 'tp5shop' ,
// 密码
'password' => '$Abc3721' ,
// 端口
'hostport' => '3306' ,
// 连接
dsn 'dsn' => '' ,
// 数据库连接参数
'params' => [],
// 数据库编码默认采用utf8
'charset' => 'utf8' ,
// 数据库表前缀
'prefix' => 'tpshop_' ,
// 数据库调试模式
'debug' => true,
// 3、项目框架的业务代码实现读写分离,使用的是 分布式(主从服务器) 配置为1
// 数据库部署方式:0 集中式(单一服务器),1 分布 式(主从服务器)
'deploy' => 1,
// 4、数据库读写分离是业务代码实现的,配置为 true
// 数据库读写是否分离 主从式有效
'rw_separate' => true,
// 读写分离后 主服务器数量
'master_num' => 1,
// 指定从服务器序号
'slave_no' => '' ,
// 是否严格检查字段是否存在
测试down主库,看从库是否可以访问。thinkphp5中, 如果slave宕机,master提供读服务。
MyCAT实现读写分离
jdk安装
①下载安装jdk https://www.oracle.com/technetwork/java/javase/do wnloads/jdk8-downloads-2133151.html 选择下载x64架构.tar.gz包 上传mycat和jdk到soft目录下 ②配置环境变量 shell > tar xvf jdk-8u192-linux-x64.tar.gz shell > mv jdk1.8.0_192 /usr/local/java ②配置环境变量 #追加环境变量 shell > echo "PATH=/usr/local/java/bin:$PATH" >> /etc/profile shell > source /etc/profile #检测java环境变量 如果看到版本信息即为成功 shell > java -versionmycat安装和测试启动
①解压安装MyCAT( 上传jdk和mycat安装包 ) shell > tar xvf Mycat-server-1.6.5-release20180122220033-linux.tar.gz -C /usr/local #解压并且添加到指定的位置 [root@mycat ~]# ls anaconda-ks.cfg frp initserver.sh jdk1.8.0_192 jdk-8u192-linux-x64.tar.gz mycat Mycat-server-1.6.5-release20180122220033-linux.tar.gz [root@mycat ~]# cp -r jdk1.8.0_192/ /usr/local/jdk [root@mycat ~]# cp -r mycat/ /usr/local/ ②软件目录介绍 bin 相关软件管理命令等 conf 配置文件目录 logs 日志目录 ③ 查看并且配置jdk环境 [root@mycat ~]# ls /usr/local/jdk/ bin man COPYRIGHT README.html include release javafx-src.zip src.zip jre THIRDPARTYLICENSEREADME-JAVAFX.txt lib THIRDPARTYLICENSEREADME.txt LICENSE [root@mycat ~]# sed -i '$aexport JAVA_HOME=/usr/local/jdk' /etc/profile [root@mycat ~]# source /etc/profile [root@mycat ~]# $JAVA_HOME -bash: /usr/local/jdk: 是一个目录 [root@mycat ~]# sed -i '$aexport PATH=$PATH:$JAVA_HOME/bin' /etc/profile [root@mycat ~]# source /etc/profile [root@mycat ~]# $PATH -bash: /usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin:/usr/local/jdk/bin: 没有那个文件或目录 ④ 测试启动myca就可以了 [root@mycat ~]# ls /usr/local/mycat/ bin catlet conf lib logs version.txt [root@mycat ~]# ll /usr/local/mycat/ [root@mycat ~]# ls /usr/local/mycat/bin/ [root@mycat ~]# /usr/local/mycat/bin/mycat console ⑤ 找到server.xml和schema.xml更改 shell > /usr/local/mycat/conf shell > vim server.xml![](https://i-blog.csdnimg.cn/direct/1fe38214c0fd47c9a420398813e040d6.png)
![](https://i-blog.csdnimg.cn/direct/bbc61e0bba004fe29341b0fc22336a20.png)
![](https://i-blog.csdnimg.cn/direct/9b95acf31a834718be67d5e818e1e52c.png)