首页 > 其他分享 >DSC集群搭建

DSC集群搭建

时间：2022-10-19 10:57:43浏览次数：84  
标签：GRP config EP 集群 ini dm8 DCR DSC 搭建

一、集群介绍

  DMDSC 集群是一个多实例、单数据库的系统。多个数据库实例可以同时访问、修改同一个数据库的数据。用户可以登录集群中的任意一个数据库实例，获得完整的数据库服务。数据文件、控制文件在集群系统中只有一份，不论有几个节点，这些节点都平等地使用这些文件，这些文件保存在共享存储上。每个节点有自己独立的联机日志和归档日志，其中联机日志保存在共享存储上，归档日志可以保存在本地存储上也可以保存在共享存储上。
  DMDSC 集群主要由数据库和数据库实例、共享存储、本地存储、通信网络、以及集群控制软件 DMCSS 组成。下面以部署了 DMASM 的 DMDSC 集群为例，展示 DMDSC 集群系统结构。

1 相关概念

数据库和数据库实例

  数据库（Database）是一个文件集合（包括数据文件、临时文件、重做日志文件和控制文件等），保存在物理磁盘或文件系统中。
  数据库实例就是一组操作系统进程（或者是一个多线程的进程）以及一些内存。通过数据库实例，可以操作数据库，一般情况下，我们访问、修改数据库都是通过数据库实例来完成的。

共享存储

  DMDSC 集群中，为了实现多个实例同时访问、修改数据，要求将数据文件、控制文件、日志文件保存在共享存储上。
  其中，配置 DMDSC 集群需要的 DCR、Voting disk 必须保存在 DMASM 文件系统管辖范围之外的共享存储上。
  本地归档日志也可以保存在共享存储上，不过这样会占用较为宝贵的共享存储资源，因此建议放在普通磁盘上即可。

本地存储

  DMDSC 集群中，本地存储用来保存配置文件（记录数据库实例配置信息的 dm.ini、dmarch.ini、dmmal.ini），本地归档日志、远程归档日志。

通信网络

  DMDSC 集群中，网络分为内部网络和公共网络两个部分。实际应用中一般还存在服务器到共享存储的网络。内部网络用于数据库实例之间交换信息和数据，MAL 链路使用的就是内部网络。公共网络用于对外提供数据库服务，用户使用公共网络地址登录 DMDSC 集群，访问数据库。

集群控制

  集群控制是集群系统的重要组成部分。DMCSS 就是一款集群控制软件，专门负责监控集群中各个节点的运行状态。DMCSS 主要功能包括：管理集群的启动和关闭，控制节点故障处理，以及管理节点重加入流程。

2 系统特性

  • 高可用性：只要集群中有一个活动节点，就能正常提供数据库服务。
  • 高吞吐量：多个节点同时提供数据库服务，有效提升集群的整体事务处理能力。
  • 负载均衡：用户的连接请求被平均分配到集群中的各个节点，确保各个节点的负载大致平衡。

二、环境准备

硬件：两台相同配置机器，2G内存，另有一块共享磁盘。
操作系统：CentOS Linux 64 位。
网络配置：A机器：192.168.44.50，B机器：192.168.44.51。
DM安装目录：/dm8。
配置文件位于目录：/dm8/config

2.1 创建共享磁盘

  使用vmware-vdiskmanager.exe创建共享磁盘。

建议使用vmware-vdiskmanager.exe的方式添加共享磁盘，直接在其中一台机器创建磁盘的方式第二台在关联的方式可能会使后面搭建出现问题。

  打开cmd进入到虚拟机安装目录:

cd /d D:\Program Files (x86)\VMware\VMware Workstation

  执行以下命令创建20G的共享磁盘:

.\vmware-vdiskmanager.exe -c -s 20G -a lsilogic -t 2 "D:\Program Files (x86)\VMware\CentOS 7.7(1)\SHARE.vmdk"

  创建完成之后，可用在目录中看到:

2.2 虚拟机添加共享磁盘

  点击要操作的虚拟机，双击硬盘，两台机器都要按照如下步骤添加:




2.3 更改两台虚拟机.VMX文件

  A，B机器还要在虚拟机文件中的xxxxx.vmx文件中添加:

disk.locking="FALSE"

三、安装达梦数据库

  参考链接：安装达梦数据库

四、配置共享存储

4.1 在共享磁盘上裸设备划分（任一机器操作即可）

fdisk -l  #查看信息
lsblk #查看分区
fdisk /dev/sdb  #分区，划分完成后，输入w保存

依次输入：（输入m查看帮助）
n→p→1→回车→+100M→回车 完成第一块磁盘划分
n→p→2→回车→+100M→回车 完成第二块磁盘划分
n→p→3→回车→+2048M→回车 完成第三块磁盘划分
n→p→回车→回车（默认将剩余空间给分区4）
w→回车

  输入lsblk查看分区信息，在A机器上划好分区后，在B机器上要关机，在启动后才能查看到分区。

4.2 修改KERNEL磁盘分区名

  A，B机器都需要操作，编辑 /etc/udev/rules.d/60-raw.rules 文件，增加以下语句：

ACTION=="add", KERNEL=="sdb1", RUN+="/bin/raw /dev/raw/raw1 %N"
ACTION=="add", KERNEL=="sdb2", RUN+="/bin/raw /dev/raw/raw2 %N"
ACTION=="add", KERNEL=="sdb3", RUN+="/bin/raw /dev/raw/raw3 %N"
ACTION=="add", KERNEL=="sdb4", RUN+="/bin/raw /dev/raw/raw4 %N"
ACTION=="add", KERNEL=="raw[1-4]", OWNER="dmdba", GROUP="dinstall", MODE="660"

4.3 执行绑定裸设备生效：

  依次执行下面两条语句，再查看是否绑定成功

partprobe /dev/sdb
udevadm trigger --action=add

  查看是否绑定成功

ll /dev/raw/raw*

五、配置文件

5.1 dmdcr_cfg.ini文件

  在DM数据库安装目录下新建目录config，准备 dmdcr_cfg.ini 配置文件，保存到/dm8/config 目录下面。后续 DMASMCMD 工具执行 init 语句会使用到。
  我的A机器：192.168.44.50，B机器：192.168.44.51
  2 个节点都要执行，使用 dmdba 用户

vi /dm8/config/dmdcr_cfg.ini

添加以下内容：

DCR_N_GRP = 3
DCR_VTD_PATH = /dev/raw/raw2
DCR_OGUID = 63635
[GRP]
DCR_GRP_TYPE = CSS
DCR_GRP_NAME = GRP_CSS
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_CSS]
DCR_EP_NAME = CSS0
DCR_EP_HOST = 192.168.44.50
DCR_EP_PORT = 9341
[GRP_CSS]
DCR_EP_NAME = CSS1
DCR_EP_HOST = 192.168.44.51
DCR_EP_PORT = 9343
[GRP]
DCR_GRP_TYPE = ASM
DCR_GRP_NAME = GRP_ASM
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_ASM]
DCR_EP_NAME = ASM0
DCR_EP_SHM_KEY = 93360
DCR_EP_SHM_SIZE = 20
DCR_EP_HOST = 192.168.44.50
DCR_EP_PORT = 9349
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP_ASM]
DCR_EP_NAME = ASM1
DCR_EP_SHM_KEY = 93361
DCR_EP_SHM_SIZE = 20
DCR_EP_HOST = 192.168.44.51
DCR_EP_PORT = 9351
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP]
DCR_GRP_TYPE = DB
DCR_GRP_NAME = GRP_DSC
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_DSC]
DCR_EP_NAME = DSC0
DCR_EP_SEQNO = 0
DCR_EP_PORT = 5236
DCR_CHECK_PORT = 9741
[GRP_DSC]
DCR_EP_NAME = DSC1
DCR_EP_SEQNO = 1
DCR_EP_PORT = 5237
DCR_CHECK_PORT = 9742

5.2 使用 DMASMCMD 工具初始化

  切换到DM数据库安装目录的bin目录下（任一机器执行即可）

cd /dm8/bin
./dmasmcmd

create dcrdisk '/dev/raw/raw1' 'dcr'
create votedisk '/dev/raw/raw2' 'vote'
create asmdisk '/dev/raw/raw3' 'LOG0'
create asmdisk '/dev/raw/raw4' 'DATA0'
init dcrdisk '/dev/raw/raw1' from '/dm8/config/dmdcr_cfg.ini'identified by 'abcd'
init votedisk '/dev/raw/raw2' from '/dm8/config/dmdcr_cfg.ini'

5.3 dmasvrmal.ini文件

  准备 DMASM 的 MAL 配置文件（命名为 dmasvrmal.ini），2个机器都需要配置，且文件内容相同，执行以下命令：

vi /dm8/config/dmasvrmal.ini

[MAL_INST1]
 MAL_INST_NAME = ASM0
 MAL_HOST = 192.168.44.50
 MAL_PORT = 7236
[MAL_INST2]
 MAL_INST_NAME = ASM1
 MAL_HOST = 192.168.44.51
 MAL_PORT = 7236

5.4 dmdcr.ini 文件

  准备 dmdcr.ini 配置文件，保存到 /dm8/config 目录下面。两个机器都需要配置。
  A、B机器的dmdcr_seqo 分别为 0 和 1 。

vi /dm8/config/dmdcr.ini

  机器A：192.168.44.50:

DMDCR_PATH = /dev/raw/raw1
DMDCR_MAL_PATH =/dm8/config/dmasvrmal.ini #dmasmsvr 使用的 MAL 配置文件路径
DMDCR_SEQNO = 0
#ASM 重启参数，命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 10
DMDCR_ASM_STARTUP_CMD = /dm8/bin/dmasmsvr dcr_ini=/dm8/config/dmdcr.ini
#DB 重启参数，命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 30
DMDCR_DB_STARTUP_CMD = /dm8/bin/dmserver path=/dm8/config/dsc1/dm.ini     dcr_ini=/dm8/config/dmdcr.ini

  机器B：192.168.44.51:

DMDCR_PATH = /dev/raw/raw1
DMDCR_MAL_PATH =/dm8/config/dmasvrmal.ini #dmasmsvr 使用的 MAL 配置文件路径
DMDCR_SEQNO = 1
#ASM 重启参数，命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 10
DMDCR_ASM_STARTUP_CMD = /dm8/bin/dmasmsvr dcr_ini=/dm8/config/dmdcr.ini
#DB 重启参数，命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 30
DMDCR_DB_STARTUP_CMD = /dm8/bin/dmserver path=/dm8/config/dsc1/dm.ini     dcr_ini=/dm8/config/dmdcr.ini

注意：DMDCR_ASM_STARTUP_CMD和DMDCR_DB_STARTUP_CMD的配置不要换行！

六、启动 DMCSS、DMASM 服务程序

  在 A、B机器 先后分别启动dmcss、dmasmsvr程序，数据库bin目录下执行。
  手动启动 dmcss 命令：

 ./dmcss DCR_INI=/dm8/config/dmdcr.ini

  手动启动 dmasmsvr 命令：

./dmasmsvr DCR_INI=/dm8/config/dmdcr.ini

七、使用 dmasmtool 工具创建 DMASM 磁盘组

  选择一个节点（192.168.44.50 ）即A机器，启动 dmasmtool 工具,在数据库安装bin目录下执行：

./dmasmtool DCR_INI=/dm8/config/dmdcr.ini

  输入下列语句创建 DMASM 磁盘组：

#创建日志磁盘组
create diskgroup 'DMLOG' asmdisk '/dev/raw/raw3'
#创建数据磁盘组
create diskgroup 'DMDATA' asmdisk '/dev/raw/raw4'

八、初始化共享存储集群数据库实例

8.1 配置dminit.ini文件

  配置 dminit 控制文件，节点 1 使用 dmdba 用户执行以下命令 ，保存到/dm8/config 目录

vi /dm8/config/dminit.ini

db_name = dsc
system_path = +DMDATA/data
system = +DMDATA/data/dsc/system.dbf
system_size = 128
roll = +DMDATA/data/dsc/roll.dbf
roll_size = 128
main = +DMDATA/data/dsc/main.dbf
main_size = 128
ctl_path = +DMDATA/data/dsc/dm.ctl
ctl_size = 8
log_size = 256
dcr_path = /dev/raw/raw1 #dcr 磁盘路径，目前不支持 asm，只能是裸设备
dcr_seqno = 0
auto_overwrite = 1
[DSC0] #inst_name 跟 dmdcr_cfg.ini 中 DB 类型 group 中 DCR_EP_NAME 对应
config_path = /dm8/config/dsc1
port_num = 5236
mal_host = 192.168.44.50
mal_port = 9340
log_path = +DMLOG/log/dsc0_log01.log
log_path = +DMLOG/log/dsc0_log02.log
[DSC1] #inst_name 跟 dmdcr_cfg.ini 中 DB 类型 group 中 DCR_EP_NAME 对应
config_path = /dm8/config/dsc2
port_num = 5237
mal_host = 192.168.44.51
mal_port = 9341
log_path = +DMLOG/log/dsc1_log01.log
log_path = +DMLOG/log/dsc1_log02.log

8.2 使用 dminit 初始化 DB 环境

  选择一个结点，A机器 ，启动 dminit 工具初始化数据库。 dminit 执行完成 后，会在 config_path 目录（ /dm8/config/dsc1 和 /dm8/config/dsc2）下生成配置文件 dm.ini 和 dmmal.ini 。

./dminit control=/dm8/config/dminit.ini



  在A机器上执行此命令，将dsc目录拷贝到B机器上

scp -r dsc2 192.168.44.51:/dm8/config/

九、启动数据库服务器

  如果 DMCSS 配置有自动拉起 dmserver 的功能，可以等待 DMCSS 自动拉起实例，不需要手动启动。
  如果需要手动启动，可参考下面的操作步骤：
  A机器：

./dmserver /dm8/config/dsc1/dm.ini dcr_ini=/dm8/config/dmdcr.ini

  B机器：

./dmserver /dm8/config/dsc2/dm.ini dcr_ini=/dm8/config/dmdcr.ini

十、配置监视器

  可以在B机器上配置dmcssm.ini文件

vi /dm8/config/dmcssm.ini

#和 dmdcr_cfg.ini 中的 DCR_OGUID 保持一致
CSSM_OGUID = 63635
#配置所有 CSS 的连接信息，
#和 dmdcr_cfg.ini 中 CSS 配置项的 DCR_EP_HOST 和 DCR_EP_PORT 保持一致
CSSM_CSS_IP = 192.168.44.50:9341
CSSM_CSS_IP = 192.168.44.51:9343

CSSM_LOG_PATH = /dm8/data/cssm/log #监视器日志文件存放路径

CSSM_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
CSSM_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间

#启动监视器
./dmcssm ini_path=/dm8/config/dmcssm.ini

  show命令查看DSC集群状况。

十一、DSC集群启动与关闭

  启动DSC集群:

 启动css        ./dmcss DCR_INI=/dm8/config/dmdcr.ini
 启动asmvr      ./dmasmsvr dcr_ini=/dm8/config/dmdcr.ini
 启动实例       ./dmserver /dm8/config/dsc1/dm.ini dcr_ini=/dm8/config/dmdcr.ini

  DSC集群关闭：
  如果 DMCSS 配置了 DMASMSVR/dmserver 自动拉起命令，可以先仅启动 DMCSS，然 后启动 DMCSSM，在 DMCSSM 控制台执行命令"ep startup asm"启动 DMASMSVR 集群， 执行"ep startup dsc"启动 dmserver 集群（其中 asm/dsc 为 dmasmsvr/dmserver 集群的组名）。类似地执行"ep stop asm/dsc"可以关闭 dmasmsvr/dmserver 集群环境。
  关闭 DMDSC 集群环境时，应先关闭 dmserver，再依次关闭 DMASMSVR 和 DMCSS。
  关闭数据库与asm：监视器中执行

ep stop GRP_DSC #关闭数据库
ep stop GRP_ASM #关闭asm

  css启动与关闭

systemctl stop DmCSSServicecss1/DmCSSServicecss2   #关闭
systemctl start DmCSSServicecss1/DmCSSServicecss2  #启动

  开启\关闭自动拉起：

set group_name auto restart on/off

十二、遇到的问题

12.1 ASM连接异常

  启动 dmasmtool 工具的时候,提示ASM连接异常

./dmasmtool DCR_INI=/dm8/dmdbms/config/dmdcr.ini

  出现错误:原因：防火墙没关，关闭防火墙即可。

12.2 启动DMCSS服务出错

  启动 dmcss的时候出现错误：

  错误原因：是共享磁盘未设置好，直接在其中一台机器创建磁盘的方式第二台在关联的方式可能会使后面搭建出现问题。建议使用vmware-vdiskmanager.exe的方式添加共享磁盘

标签：GRP,config,EP,集群,ini,dm8,DCR,DSC,搭建
From： https://www.cnblogs.com/tazimi/p/16805445.html

相关文章

  • ansible搭建基本使用
    一、安装ansible配置yum源RHEL/CentOS6:#yuminstallhttps://dl.fedoraproject.org/pub/epel/epel-release-latest-6.noarch.rpmRHEL/CentOS7:#yuminstallh......
  • 从0搭建vue3组件库:Shake抖动组件
    先看下效果其实就是个抖动效果组件，实现起来也非常简单。之所以做这样一个组件是为了后面写Form表单的时候会用到它做一个规则校验，比如下面一个简单的登录页面，当点击登录......
  • 拿到40k的offer入职，第一个任务就是搭建一套最牛监控平台！
    转载：以下文章来源于架构悟道 ，作者veezeanhttps://mp.weixin.qq.com/s?__biz=MzU0OTk3ODQ3Ng==&mid=2247565686&idx=1&sn=f7887ff74a54ca4c80859763cca712cc&chksm=fba429......
  • 3天用flask搭建平台实战教程四：使用flask-restful-swagger-2.0自动生成swagger文档
    flask-restful-swagger-2是适用于flask-restful的包装器，根据swagger2.0规范支持swagger，flask-restful-swagger-2基于flashrestfulswagger，但flashrestfulswagger仅支持......
  • Selenium+Python系列 - 开发环境搭建
    一、写在前面我从未想过自己会写python系列的自动化文章，有些同学会问，那你现在为什么又开始写了？不止一个人找过我，问我可以写一些Python自动化的文章吗，答案是肯定的。笔......
  • 干货 | Elasticsearch 冷热集群架构实战
    Elasticsearch最少必要知识实战教程直播回放0、题记Elasticsearch实战数据量级少的时候，单节点就能玩的很6，但是随着数据量的增长，多节点分布式横向扩展集群是大势所趋。之前......
  • 干货 | Elasitcsearch7.X集群、索引备份与恢复实战
    Elasticsearch最少必要知识实战教程直播回放1、问题引出ES中文社区中，有如下问题：问题1：存储数据，data目录从一个机器直接移到一台新的机器是否可以直接使用？问题2：es升级时，data......
  • 探究 | Elasticsearch集群规模和容量规划的底层逻辑
    Elasticsearch最少必要知识实战教程直播回放0、引言实战中经常遇到的问题：问题1：请问下大家是如何评估集群的规模？比如数据量达到百万，千万，亿万，分别需要什么级别的集群，这要......
  • Hadoop 集群配置
    参考官网整理可能的配置：https://hadoop.apache.org/docs/r2.9.2/hadoop-project-dist/hadoop-common/ClusterSetup.htmletc/hadoop/core-site.xml<configuration><pro......
  • K8S集群部署
     ###############  K8S集群部署 ##################版本kubelet-1.18.0kubeadm-1.18.0kubectl-1.18.0docker-18.06.1calico-v3.20###机器172.31.16.2k......

赞助商

阅读排行

网站主页关于我们联系我们网站地图

本网站内容转载自其他媒体，侵权联系[admin##ips99.com]。

Copyright © 2020-2023 IPS99 版权所有 IPS99