首页 > 其他分享 >数据守护集群部署(两节点实时主备)

数据守护集群部署(两节点实时主备)

时间:2022-10-10 10:55:35浏览次数:65  
标签:## MAL 实例 主备 ini dm8 GRP1 节点 守护

环境说明

实例名 PORT_NUM MAL_INST_DW_PORT MAL_HOST MAL_PORT MAL_DW_PORT
GRP1_01 32141 33141 192.168.44.173 61141 52141
GRP1_02 32142 33142 192.168.44.177 61142 52142

数据准备

配置数据守护之前,必须先通过备份还原方式同步各数据库的数据,确保各数据的数据保持完全一致。主库可以是新初始化的数据库,也可以是正在生产、使用中的数据库。不能使用分别初始化库或者直接拷贝数据文件的方法。
如果是初始搭建环境,可以通过对主库脱机备份、对备库脱机还原的方式来准备数据,如果主库已经处于运行状态,则可以对主库进行联机备份、对备库脱机还原的方式来准备数据。

初始化实例:

分别在三台主机上初始化实例:一般情况下初始化实例完成之后要将数据库正常的启停一次。

./dminit path=/dm8/data instance_name=GRP1_01 db_name=zhubei port_num=32141 #初始化主库实例 GRP1_01  
./dminit path=/dm8/data instance_name=GRP1_02 db_name=zhubei port_num=32142 #初始化备库实例 GRP1_02  
./dminit path=/dm8/data instance_name=DMDW db_name=DMDW port_num=5236 #初始化监视器实例 DMDW

备份还原:

通过备份还原方式同步各数据库的数据,确保各数据库的数据保持完全一致。

backup database '/dm8/data/zhubei/dm.ini' full backupset '/dm8/back/BACK_FILE_1'  #脱机备份主库
scp -r /dm8/back/BACK_FILE_1 dmdba:[email protected]:/dm8/back              #将备份拷贝到备库
restore database '/dm8/data/zhubei/dm.ini' from backupset '/dm8/back/BACK_FILE_1' #还原备库
recover database '/dm8/data/zhubei/dm.ini' from backupset '/dm8/back/BACK_FILE_1' #恢复备库
recover database '/dm8/data/zhubei/dm.ini' update db_magic #更新数据库魔数

此时,主备库之间数据已完全一致,在实际操作中,如果主库的实例不支持脱机备 份那可以进入disql工具中执行如下指令进行联机备份:

SQL>BACKUP DATABASE BACKUPSET '/dm8/back/BACK_FILE_1';

配置主库

dm.ini

##实例名,建议使用“组名_守护环境_序号”的命名方式,总长度不能超过16
INSTANCE_NAME = GRP1_01
PORT_NUM = 32141                  ##数据库实例监听端口
DW_INACTIVE_INTERVAL = 60         ##接收守护进程消息超时时间
ALTER_MODE_STATUS = 0             ##不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2             ##不允许备库OFFLINE表空间
MAL_INI = 1                       ##打开MAL系统
ARCH_INI = 1                      ##打开归档配置
RLOG_SEND_APPLY_MON = 64          ##统计最近64次的日志发送信息

dmmal.ini

配置 MAL 系统,各主备库的 dmmal.ini 配置必须完全一致,MAL_HOST 使用内部网络 IP,MAL_PORT 与 dm.ini 中 PORT_NUM 使用不同的端口值,MAL_DW_PORT 是各实例对应的守护进程之间,以及守护进程和监视器之间的通信端口,配置如下:

MAL_CHECK_INTERVAL = 5 			##MAL链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5           	##判定MAL链路断开的时间
[MAL_INST1]
	MAL_INST_NAME = GRP1_01		        ##实例名,和dm.ini中的INSTANCE_NAME一致
	MAL_HOST = 192.168.44.173               ##MAL系统监听TCP连接的IP地址
	MAL_PORT = 61141			##MAL系统监听TCP连接的端口
	MAL_INST_HOST = 192.168.44.173	        ##实例的对外服务IP地址
	MAL_INST_PORT = 32141		        ##实例的对外服务端口,和dm.ini中的PORT_NUM一致
	MAL_DW_PORT = 52141 			##实例本地的守护进程监听TCP连接的端口
	MAL_INST_DW_PORT = 33141 		##实例监听守护进程TCP连接的端口
[MAL_INST2]
	MAL_INST_NAME = GRP1_02
	MAL_HOST = 192.168.44.177
	MAL_PORT = 61142
	MAL_INST_HOST = 192.168.44.177
	MAL_INST_PORT = 32142
	MAL_DW_PORT = 52142
	MAL_INST_DW_PORT = 33142

dmarch.ini

修改 dmarch.ini,配置本地归档和实时归档。
除了本地归档外,其他归档配置项中的 ARCH_DEST 表示实例是 Primary 模式时,需要同步归档数据的目标实例名。
当前实例 GRP1_01 是主库,需要向 GRP1_02(实时备库)同步数据,因此实时归档的 ARCH_DEST 配置为 GRP1_02。

[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME 				##实时归档类型
ARCH_DEST = GRP1_02 				##实时归档目标实例名

[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL 				##本地归档类型
ARCH_DEST = /dm8/arch 	                        ##本地归档文件存放路径
ARCH_FILE_SIZE = 128 				##单位Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0				##单位Mb,0表示无限制,范围1024~2147483647M

dmwatcher.ini

修改 dmwatcher.ini 配置守护进程,配置为全局守护类型,使用自动切换模式。

[GRP1]
DW_TYPE = GLOBAL 					##全局守护类型
DW_MODE = AUTO						##自动切换模式
DW_ERROR_TIME = 10 					##远程守护进程故障认定时间
INST_RECOVER_TIME = 60 				##主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 				##本地实例故障认定时间
INST_OGUID = 123456 				##守护系统唯一OGUID值
INST_INI = /dm8/data/zhubei/dm.ini 	        ##dm.ini配置文件路径
INST_AUTO_RESTART = 1 				##打开实例的自动启动功能
INST_STARTUP_CMD = /dm8/dmdbms/bin/dmserver	##命令行方式启动
RLOG_SEND_THRESHOLD = 0 			##指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 			##指定备库重演日志的时间阈值,默认关闭

启动主库

以 Mount 方式启动主库

./dmserver /dm8/data/zhubei/dm.ini mount

注意:一定要以Mount方式启动数据库实例,否则系统启动时会重构回滚表空间,生成Redo日志;并且,启动后应用可能连接到数据库实例进行操作,破坏主备库的数据一致性。数据守护配置结束后,守护进程会自动Open数据库。

设置 OGUID

启动命令行工具 DIsql,登录主库设置 OGUID 值。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(123456);
SQL>alter database primary;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

注意:系统通过OGUID值确定一个守护进程组,由用户保证OGUID值的唯一性,并确保数据守护系统中,数据库、守护进程和监视器配置相同的OGUID值。

配置备库

dm.ini

##实例名,建议使用“组名_守护环境_序号”的命名方式,总长度不能超过16
INSTANCE_NAME = GRP1_02
PORT_NUM = 32142 				##数据库实例监听端口
DW_INACTIVE_INTERVAL = 60		##接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 			##不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 			##不允许备库OFFLINE表空间
MAL_INI = 1 					##打开MAL系统
ARCH_INI = 1					##打开归档配置
RLOG_SEND_APPLY_MON = 64		##统计最近64次的日志重演信息

dmarch.ini

修改 dmarch.ini,配置本地归档和实时归档。
除了本地归档外,其他归档配置项中的 ARCH_DEST 表示实例是 Primary 模式时,需要同步归档数据的目标实例名。
当前实例 GRP1_02 是备库,守护系统配置完成后,可能在各种故障处理中,GRP1_02 切换为新的主库,正常情况下,GRP1_01 会切换为新的备库,需要向 GRP1_01 同步数据,因此实时归档的 ARCH_DEST 配置为 GRP1_01。

[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME 				##实时归档类型
ARCH_DEST = GRP1_01 				##实时归档目标实例名

[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL 					##本地归档类型
ARCH_DEST = /dm8/arch 	##本地归档文件存放路径
ARCH_FILE_SIZE = 128 				##单位Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0				##单位Mb,0表示无限制,范围1024~2147483647M

其他配置文件内容与主库相同。

启动备库

以 Mount 方式启动备库。

./dmserver /dm8/data/zhubei/dm.ini mount

设置 OGUID

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(123456);
SQL>alter database standby;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

配置监视器

配置监视器时可以选择配置单实例监视器或配置多实例监视器,由于主库和实时备库的守护进程配置为自动切换模式,因此这里选择配置确认监视器。和普通监视器相比,确认监视器除了相同的命令支持外,在主库发生故障时,能够自动通知实时备库接管为新的主库,具有自动故障处理的功能。

注意:故障自动切换模式下,必须配置确认监视器,且确认监视器最多只能配置一个。

修改dmmonitor.ini

配置确认监视器,其中 MON_DW_IP 中的 IP 和 PORT 和 dmmal.ini 中的 MAL_HOST 和 MAL_DW_PORT 配置项保持一致。

MON_DW_CONFIRM = 1 		##确认监视器模式
MON_LOG_PATH = /dm8/data/log    ##监视器日志文件存放路径
MON_LOG_INTERVAL = 60 		##每隔60s定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 		##每个日志文件最大32M
MON_LOG_SPACE_LIMIT = 0 	##不限定日志文件总占用空间
[GRP1]
	MON_INST_OGUID = 123456 ##组GRP1的唯一OGUID值
##以下配置为监视器到组GRP1的守护进程的连接信息,以“IP:PORT”的形式配置
##IP对应dmmal.ini中的MAL_HOST,PORT对应dmmal.ini中的MAL_DW_PORT
	MON_DW_IP = 192.168.44.173:52141
	MON_DW_IP = 192.168.44.177:52142

启动数据守护进程

./dmwatcher /dm8/data/zhubei/dmwatcher.ini
./dmwatcher /dm8/data/zhubei/dmwatcher.ini

启动监视器进程

 ./dmmonitor /dm8/data/DM01/dmmonitor.ini

注册服务

./dm_service_installer.sh -t dmserver -dm_ini /dm8/data/zhubei/dm.ini -p GRP1_01
./dm_service_installer.sh -t dmwatcher  -watcher_ini /dm8/data/zhubei/dmwatcher.ini -p GRP1
./dm_service_installer.sh -t dmmonitor  -monitor_ini /dm8/data/DM01/dmmonitor.ini -p GRP1

检查状态

在守护进程前台启动之后输入show命令可以查看当前状态
在监视器前台启动之后入输入show命令可以查看集群状态

故障排查

出现问题:在监视器中显示没有活动实例或者监视器还未收到守护进程消息
原因:无法与主库、备库通信,防火墙没有关闭
关闭防火墙即可:

systemctl stop firewalld.service      ##关闭防火墙
systemctl disable firewalld.service   ##开机禁用防火墙

测试实时主备数据同步

查看主库:

create table test(id int);
commit;
insert into test values(1);
commit;
select * from test;

查看备库

select * from test;

标签:##,MAL,实例,主备,ini,dm8,GRP1,节点,守护
From: https://www.cnblogs.com/tazimi/p/16774859.html

相关文章

  • 代码随想录day16 ● 104.二叉树的最大深度 559.n叉树的最大深度 ● 111.二叉树的
    104.二叉树的最大深度迭代法:1classSolution{2public:3intmaxDepth(TreeNode*root){4//创建变量用于存储深度5intans=0;6......
  • 使用PyG进行图神经网络的节点分类、链路预测和异常检测
    图神经网络(GraphNeuralNetworks)是一种针对图结构数据(如社交图、网络安全网络或分子表示)设计的机器学习算法。它在过去几年里发展迅速,被用于许多不同的应用程序。在这......
  • pytorch 创建图与叶子节点与根节点
    创建时用户直接给出的为叶子节点,没有fn由几个叶子节点推导来的为最终结果,为root节点,有fn。譬如:x=tt.tensor([1],dtype='flaot',requires_grad=True)y=x.sum()这里的x......
  • Python 守护线程
    如果你设置一个线程为守护线程,,就表示你在说这个线程是不重要的,在进程退出的时候,不用等待这个线程退出。如果你的主线程在退出的时候,不用等待那些子线程完成,那就设置这些线......
  • Transportation(最小生成树,虚拟节点)
    题意有\(N\)个岛屿,现在需要将它们联通起来。可以选择在岛上建立飞机场,花费为\(X_i\);也可以在岛上建立港口,花费为\(Y_i\);还可以在两个岛屿\(A_i\)和\(B_i\)之间修路,花费......
  • 带头节点和不带头节点单链表的基础概念
    1、单链表定义链表是通过一组任意的存储单元来存储线性表中的数据元素,这些存储单元可以是连续的也可以是不连续的。 指针:通常使用“头指针”来标识一个链表,如单链表L,头......
  • Vue阻止点击其他DOM节点失去输入框焦点
    <[email protected]="comfirm"><u-buttonsize="medium"type="primary">确定</u-button></view>mousedown事件使用capture修饰符配合prevent......
  • 守护进程daemon
    伴随父进程的生命周期终结而终结的进程deffunc1():print('func1')deffunc2():print('func2')if__name__=='__main__':frommultiprocessingimpor......
  • 二叉树两个节点的最近公共祖先问题
    二叉树两个节点的最近公共祖先问题作者:Grey原文地址:博客园:二叉树两个节点的最近公共祖先问题CSDN:二叉树两个节点的最近公共祖先问题题目描述给定一棵二叉树的头节点......
  • 链表中间节点
    slow一次走一步,fast一次走两步。那么当fast到达链表的末尾时,slow必然位于中间。ListNode*middleNode(ListNode*head){ListNode*slow=head;......