首页 > 其他分享 >MPP集群的搭建

MPP集群的搭建

时间:2022-08-29 00:44:09浏览次数:50  
标签:INST ini MPP DW dm8 集群 MAL 搭建

1.端口规划

服务器 ip 实例名 PORT_NUM MAL_PORT MAL_DR_PORT GROUP
主1 192.168.44.171 GRP1_MPP_EP01 5236 5337 5253 GRP1
备1 192.168.44.167 GRP1_MPP_EP11 5237 5338 5254 GRP1
主2 192.168.44.167 GRP2_MPP_EP02 5236 5337 5253 GRP2
备2 192.168.44.171 GRP2_MPP_EP22 5237 5338 5254 GRP2

2.初始化实例

本例中采取机器交叉的方式配置两个备数据库
注意:初始化完之后都需要正常的启停一次。
192.168.44.171节点初始化库至目录 /dm8/data/:
GRP1主库:./dminit path=/dm8/data db_name=EP01 instance_name=GRP1_MPP_EP01
GRP2备库:./dminit path=/dm8/data db_name=EP22 instance_name=GRP2_MPP_EP22

192.168.44.167节点初始化库至目录/dm8/data/:
GRP2主库:./dminit path=/dm8/data db_name=EP02 instance_name=GRP2_MPP_EP02
GRP1备库:./dminit path=/dm8/data db_name=EP11 instance_name=GRP1_MPP_EP11

3.备份还原

脱机备份:./dmrman CTLSTMT="BACKUP DATABASE '/dm8/data/EP01/dm.ini' FULL TO BACKUP_FILE1 BACKUPSET '/dm8/back/EP01'"
拷贝备份文件到备库所在机器
scp -r /dm8/back/EP01/ [email protected]:/dm8/back/
执行脱机数据库还原与恢复
./dmrman ctlstmt="RESTORE DATABASE '/dm8/data/EP11/dm.ini' FROM BACKUPSET '/dm8/back/EP01'"

./dmrman ctlstmt="RECOVER DATABASE '/dm8/data/EP11/dm.ini' FROM BACKUPSET '/dm8/back/EP01'"

./dmrman CTLSTMT="RECOVER DATABASE '/dm8/data/EP11/dm.ini' UPDATE DB_MAGIC"

EP22同EP11。

4.配置主库GRP1_MPP_EP01

配置 dm.ini
INSTANCE_NAME = GRP1_MPP_EP01
PORT_NUM = 5236
DW_INACTIVE_INTERVAL = 60
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2
MAL_INI = 1 ARCH_INI = 1
MPP_INI = 1
RLOG_SEND_APPLY_MON = 64

配置 dmmal.ini
MAL_CHECK_INTERVAL = 5
MAL_CONN_FAIL_INTERVAL = 5

[MAL_INST1]
MAL_INST_NAME = GRP1_MPP_EP01
MAL_HOST = 192.168.44.171
MAL_PORT = 5337
MAL_INST_HOST = 192.168.44.171
MAL_INST_PORT = 5236
MAL_DW_PORT = 5253
MAL_INST_DW_PORT = 5243

[MAL_INST2]
MAL_INST_NAME = GRP2_MPP_EP02
MAL_HOST = 192.168.44.167
MAL_PORT = 5337
MAL_INST_HOST = 192.168.44.167
MAL_INST_PORT = 5236
MAL_DW_PORT = 5253
MAL_INST_DW_PORT = 5243

[MAL_INST3]
MAL_INST_NAME = GRP1_MPP_EP11
MAL_HOST = 192.168.44.167
MAL_PORT = 5338
MAL_INST_HOST = 192.168.44.167
MAL_INST_PORT = 5237
MAL_DW_PORT = 5254
MAL_INST_DW_PORT = 5244

[MAL_INST4]
MAL_INST_NAME = GRP2_MPP_EP22
MAL_HOST = 192.168.44.171
MAL_PORT = 5338
MAL_INST_HOST = 192.168.44.171
MAL_INST_PORT = 5237
MAL_DW_PORT = 5254
MAL_INST_DW_PORT = 5244

配置 dmarch.ini
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = GRP1_MPP_EP11
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dm8/data/EP01/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

配置 dmmpp.ctl
dmmpp.ctl 是二进制文件,由 dmmpp.ini 文本通过 dmctlcvt 工具转换而来。

[service_name1]
mpp_seq_no = 0
mpp_inst_name = GRP1_MPP_EP01
[service_name2]
mpp_seq_no = 1
mpp_inst_name = GRP2_MPP_EP02

转换命令如下:
./dmctlcvt TYPE=2 SRC=/dm8/data/EP01/dmmpp.ini DEST=/dm8/data/EP01/dmmpp.ctl

启动主库
以 Mount 方式启动主库。
./dmserver /dm8/data/EP01/dm.ini mount
设置 OGUID、修改数据库模式
启动命令行工具 disql,使用 MPP 类型为 LOCAL 方式,登录主库设置 OGUID 值。

./disql SYSDBA/[email protected]:5236#"{mpp_type=local}"
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45330);
SQL>alter database primary;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

5. 配置主库GRP2_MPP_EP02

配置dm.ini

INSTANCE_NAME = GRP2_MPP_EP02
PORT_NUM = 5236
DW_INACTIVE_INTERVAL = 60
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2
MAL_INI = 1
ARCH_INI = 1
MPP_INI = 1
RLOG_SEND_APPLY_MON = 64

配置dmmal.ini
同GRP1_MPP_EP01


配置dmarch.ini
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = GRP2_MPP_EP22
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dm8/data/EP02/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

配置 dmmpp.ctl
同GRP_MPP_EP01,拷贝 dmmpp.ctl 到/home/dmdba/data/EP02/目录即可。

启动主库
以 Mount 方式启动主库。
./dmserver /dm8/data/EP02/dm.ini mount

设置 OGUID、修改数据库模式
启动命令行工具 dIsql,使用 MPP 类型为 LOCAL 方式,登录主库设置 OGUID 值。
./disql SYSDBA/[email protected]:5236#"{mpp_type=local}"
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45331);
SQL>alter database primary;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

6.配置备库GRP1_MPP_EP11
配置dm.ini
INSTANCE_NAME = GRP1_MPP_EP11
PORT_NUM = 5237
DW_INACTIVE_INTERVAL = 60
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2
MAL_INI = 1
ARCH_INI = 1
MPP_INI = 1
RLOG_SEND_APPLY_MON = 64

配置 dmmal.ini
直接将实例GRP1_MPP_EP01 配置的dmmal.ini 拷贝到/dm8/data/EP11目录中。

配置 dmarch.ini
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = GRP1_MPP_EP01
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dm8/data/EP11/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

启动备库
以 Mount 方式启动主库。
./dmserver /dm8/data/EP11/dm.ini mount

设置 OGUID、修改数据库模式
启动命令行工具 dIsql,使用 MPP 类型为 LOCAL 方式,登录主库设置 OGUID 值。
./disql SYSDBA/[email protected]:5237#"{mpp_type=local}"
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45330);
SQL>alter database STANDBY;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

7. 配置备库GRP2_MPP_EP22
配置dm.ini
INSTANCE_NAME = GRP2_MPP_EP22
PORT_NUM = 5237
DW_INACTIVE_INTERVAL = 60
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2
MAL_INI = 1
ARCH_INI = 1
MPP_INI = 1
RLOG_SEND_APPLY_MON = 64

配置 dmmal.ini
直接将实例GRP1_MPP_EP01 配置的dmmal.ini 拷贝到/home/dmdba/data/EP22目录中。

配置 dmarch.ini
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = GRP2_MPP_EP02
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dm8/data/EP22/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

配置 dmmpp.ctl
直接将实例GRP1_MPP_EP01的dmmpp.ctl拷贝到/home/dmdba/data/EP22目录中。

启动主库
以 Mount 方式启动备库。
./dmserver /dm8/data/EP22/dm.ini mount

设置 OGUID、修改数据库模式
启动命令行工具 dIsql,使用 MPP 类型为 LOCAL 方式,登录主库设置 OGUID 值。
./disql SYSDBA/[email protected]:5237#"{mpp_type=local}"
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45331);
SQL>alter database STANDBY;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

8. 配置 dmwatcher.ini

一般来说,每个单独的实例都是使用一个单独的守护进程守护。比如前面的实时主备和DM 数据守护与读写分离集群 V4.0读写分离集群的配置。本例中,由于同一台机器上有不同组的两个实例,我们可以只配置一个守护进程,同时守护两个实例。

A 机器上配置 dmwatcher.ini,放在EP01下,配置为全局守护类型,使用自动切换模式。
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45330 #守护系统唯一 OGUID 值
INST_INI = /dm8/data/EP01/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm8/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭

[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45331 #守护系统唯一 OGUID 值
INST_INI = /dm8/data/EP22/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm8/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭

B 机器上配置 dmwatcher.ini,配置为全局守护类型,使用自动切换模式。
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45330 #守护系统唯一 OGUID 值
INST_INI =/dm8/data/EP11/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm8/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45331 #守护系统唯一 OGUID 值
INST_INI = /dm8/data/EP02/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm8/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭

9. 起动守护进程,自动将实例open

dm01:
cd /dm8/dmdbms/bin
./dmwatcher /dm8/data/EP01/dmwatcher.ini

dm02:
cd /dm8/dmdbms/bin
./dmwatcher /dm8/data/EP02/dmwatcher.ini

10. 配置监视器

MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH =/dm8/dmdbms/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔60s定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间

[GRP1]
MON_INST_OGUID = 45330 #组GRP1的唯一OGUID值

以下配置为监视器到组GRP1的守护进程的连接信息,以―IP:PORT‖的形式配置

IP对应dmmal.ini中的 MAL_HOST,PORT对应dmmal.ini中的 MAL_DW_PORT

MON_DW_IP = 192.168.44.171:5253
MON_DW_IP = 192.168.44.167:5254

[GRP2]
MON_INST_OGUID = 45331 #组GRP2的唯一OGUID值

以下配置为监视器到组GRP2的守护进程的连接信息,以―IP:PORT‖的形式配置

IP对应 dmmal.ini 中的MAL_HOST,PORT对应dmmal.ini中的MAL_DW_PORT

MON_DW_IP = 192.168.44.171:5254
MON_DW_IP = 192.168.44.167:5253

11. 起动监视器

cd /dm8/dmdbms/bin
./dmmonitor /dm8/data/dmmonitor.ini

标签:INST,ini,MPP,DW,dm8,集群,MAL,搭建
From: https://www.cnblogs.com/tazimi/p/16634587.html

相关文章

  • 个人网盘搭建——搭建Cloudreve并对接onedrive
    前言搭建这个主要是为了方便自己备份,顺便可以水一下文章(bushi)其次是自己有好几个微软的全局账号吃灰,还是想稍微利用一下的,如果有人要子号可以来联系哦,好心的我应该会给你......
  • Java入门-编程环境搭建和IDEA软件安装
    JDK8下载安装若之前下载过JDK,则卸载JDK:删除java的安装目录、删除JAVA_HOME、删除path下关于java的目录、cmdjava_version安装JDK:百度JDK8、找到下载地址、同意协议、下......
  • 读写分离集群搭建
    1部署规划读写分离集群适合读多写少的应用环境。Ip规划主机名服务ip数据库名实例名DM_1192.168.44.172DMSERVERrw_1DM_2192.168.44.167DMSERVERrw_......
  • 快速搭建 SpringCloud Alibaba Nacos 配置中心!
    SpringCloudAlibaba是阿里巴巴提供的一站式微服务开发解决方案,目前已被SpringCloud官方收录。而Nacos作为SpringCloudAlibaba的核心组件之一,提供了两个非常重......
  • nginx 搭建脚本
    vimnginx.shmkdir-p/data/software/init_installcd/data/software/init_install/tar-zxvfnginx-1.4.4.tar.gztar-zxvfpcre-8.20.tar.gzcdnginx-1.4.4#在......
  • Java我的高效编程之环境搭建
    前言:刚毕业,工作之余写博客有利于提高技术,更是能帮助人,接下来会认认真真写好每一篇博客。希望大家多多支持。废话不多说,马上开始。这是一篇环境搭建的博客。jdk+eclipse+s......
  • Spring源码01:环境搭建
    写在开始:这个系列会陆续更新我学习Spring源码的一些笔记与自己的理解,由于本人水平有限,难免对有些知识理解不到位,亦或者手误导致文中有不正确的地方,欢迎各位指正与探讨。......
  • bind搭建内网DNS服务器架构(主从、子域授权、DNS转发器)
    实验目的模拟企业DNS服务架构服务器及原理实验环境准备实验架构图实验设备DNS服务器4台主服务器master(centos8):IP_192.168.100.30,从服务器slave(rocky8):192.168.1......
  • rocketMQ 集群的搭建
    准备四台机器     先实现2主2从同步   修改主配置文件   brokerName//主从要一致brokerId=0//master是0 slave>0brokerRole=SYNC_MAST......
  • Envoy 集群故障处理机制
    故障处理机制Envoy提供了一系列开箱即用的故障处理机制;超时(timeout)有限次数的重试,并支持可变的重试延迟主动健康检查与异常探测连接池断路器所有......