DMDSC两节点部署

# 一、DMDSC介绍

DMDSC 集群是一个多实例、单数据库的系统。多个数据库实例可以同时访问、修改同一个数据库的数据。用户可以登录集群中的任意一个数据库实例，获得完整的数据库服务。
DMDSC 集群主要由数据库和数据库实例、共享存储、本地存储、通信网络、以及集群控制软件DMCSS 组成。

二、DMDSC前期准备

2.1部署规划

DSC0 DSC1
ip地址：192.168.37.141、192.168.37.132
数据库安装目录：/dm8、/dm8
实例配置目录： /dm8/config/dsc0/DMDSC0、/dm8/config/dsc1/DMDSC1
配置文件目录：/dm8/config、/dm8/config
实例端口号：5236、5237

2.2配置双网卡

两台服务器需要配置双网卡。

2.3添加共享磁盘

两台虚拟机都配备好共享磁盘后到虚拟机创建路径上以笔记本的方式打开.VMX后缀的文件

在文件中添加以下内容：

scsi0.sharedBus = "virtual" 
scsi0:1.deviceType = "disk"
 
disk.locking = "false"
diskLib.dataCacheMaxSize = "0"
diskLib.dataCacheMaxReadAheadSize = "0"
diskLib.DataCacheMinReadAheadSize = "0"
diskLib.dataCachePageSize = "4096"
diskLib.maxUnsyncedWrites = "0"
disk.EnableUUID = "TRUE"

然后重启两台虚拟机。

输入以下命令查看磁盘情况：

fdisk -l

2.4在共享设备上裸设备划分[DSC0 DSC1]

root用户输入fdisk /dev/sdb 命令进行分区操作:
输入命令partprobe /dev/sdb刷新磁盘, 刷新后再进行查看

编辑两节点下的/etc/udev/rules.d/70-persistent-ipoib.rules文件添加以下内容：

ACTION=="add",KERNEL=="sdb1",RUN+="/bin/raw /dev/raw/raw1 %N"
ACTION=="add",KERNEL=="sdb2",RUN+="/bin/raw /dev/raw/raw2 %N"
ACTION=="add",KERNEL=="sdb3",RUN+="/bin/raw /dev/raw/raw3 %N"
ACTION=="add",KERNEL=="sdb4",RUN+="/bin/raw /dev/raw/raw4 %N"
KERNEL=="raw[1-4]", OWNER="dmdba", GROUP="dinstall", MODE="660"

三、部署DSC

3.1配置dmdcr_cfg.ini文件[DSC0]

再DSC0的虚拟机上创建 /dm8/config,并新建 dmdcr_cfg.ini 配置文件：

mkdir /dm8/config
touch dmdcr_cfg.ini

在配置文件中添加以下内容：

DCR_N_GRP = 3
DCR_VTD_PATH = /dev/raw/raw2
DCR_OGUID = 63635
[GRP]
DCR_GRP_TYPE = CSS
DCR_GRP_NAME = GRP_CSS
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_CSS]
DCR_EP_NAME = CSS0
DCR_EP_HOST = 192.168.37.141
DCR_EP_PORT = 9341
[GRP_CSS]
DCR_EP_NAME = CSS1
DCR_EP_HOST = 192.168.37.132
DCR_EP_PORT = 9343
[GRP]
DCR_GRP_TYPE = ASM
DCR_GRP_NAME = GRP_ASM
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_ASM]
DCR_EP_NAME = ASM0
DCR_EP_SHM_KEY = 93360
DCR_EP_SHM_SIZE = 20
DCR_EP_HOST = 192.168.37.141
DCR_EP_PORT = 9349
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP_ASM]
DCR_EP_NAME = ASM1
DCR_EP_SHM_KEY = 93361
DCR_EP_SHM_SIZE = 20
DCR_EP_HOST = 192.168.37.132
DCR_EP_PORT = 9351
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP]
DCR_GRP_TYPE = DB
DCR_GRP_NAME = GRP_DSC
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_DSC]
DCR_EP_NAME = DSC0
DCR_EP_SEQNO = 0
DCR_EP_PORT = 5236
DCR_CHECK_PORT = 9741
[GRP_DSC]
DCR_EP_NAME = DSC1
DCR_EP_SEQNO = 1
DCR_EP_PORT = 5237
DCR_CHECK_PORT = 9742

在/bin目录下执行以下命令

ASM>create dcrdisk '/dev/raw/raw1' 'dcr'

ASM>create votedisk '/dev/raw/raw2' 'vote'

ASM>create asmdisk '/dev/raw/raw3' 'LOG0'

ASM>create asmdisk '/dev/raw/raw4' 'DATA0'

ASM>init dcrdisk '/dev/raw/raw1' from '/dm8/config/dmdcr_cfg.ini' identified by 'abcd'

ASM>init votedisk '/dev/raw/raw2' from '/dm8/config/dmdcr_cfg.ini'

3.2准备 DMASM 的 MAL 配置文件[DSC0 DSC1]

在 /dm8/config 目录下创建 dmasvrmal.ini 配置文件，并添加以下内容。使用 DMASM 的所有节点都要配置，内容完全一样。

[MAL_INST1]
 MAL_INST_NAME = ASM0
 MAL_HOST = 192.168.37.141
 MAL_PORT = 7236
[MAL_INST2]
 MAL_INST_NAME = ASM1
 MAL_HOST = 192.168.37.132
 MAL_PORT = 7237

3.3准备 dmdcr.ini 配置文件

DMASM 的两个节点分别配置 dmdcr.ini，dmdcr_path 相同，dmasvrmal.ini 文件内容也相同，dmdcr_seqo 分别为 0 和 1。

DSC0:

DMDCR_PATH = /dev/raw/raw1

DMDCR_MAL_PATH =/dm8/config/dmasvrmal.ini #dmasmsvr 使用的 MAL 配置文件路径

DMDCR_SEQNO = 0

#ASM 重启参数，命令行方式启动

DMDCR_ASM_RESTART_INTERVAL = 0

DMDCR_ASM_STARTUP_CMD =/dm8/config/dmasmsvr dcr_ini=/dm8/config/dmdcr.ini

#DB 重启参数，命令行方式启动

DMDCR_DB_RESTART_INTERVAL = 0

DMDCR_DB_STARTUP_CMD = /dm8/config/dmserver path=/dm8/config/dsc0_config/dm.ini  dcr_ini=/dm8/config/dmdcr.ini
~                                                                 
DSC1:

DMDCR_PATH = /dev/raw/raw1

DMDCR_MAL_PATH =/dm8/config/dmasvrmal.ini #dmasmsvr 使用的 MAL 配置文件路径

DMDCR_SEQNO = 1

#ASM 重启参数，命令行方式启动

DMDCR_ASM_RESTART_INTERVAL = 1

DMDCR_ASM_STARTUP_CMD =/dm8/bin/dmasmsvr dcr_ini=/dm8/config/dmdcr.ini

#DB 重启参数，命令行方式启动

DMDCR_DB_RESTART_INTERVAL = 1

DMDCR_DB_STARTUP_CMD = /dm8/bin/dmserver path=/dm8/config/dsc1/DMDSC1/dm.ini dcr_ini=/dm8/config/dmdcr.ini

3.4启动DMCSS、DMASM服务程序[DSC0 DSC1]

在DSC0和DSC1上先后启动dmcss、dmasm程序：

DSC0：
./dmcss DCR_INI=/dm8/config/dmdcr.ini
./dmasmsvr DCR_INI=/dm8/config/dmdcr.ini

DSC1
./dmcss dcr_ini=/dm8/config/dmdcr.ini
./dmasmsvr DCR_INI=/dm8/config/dmdcr.ini

如果出现该问题，即该目录的权限有问题，修改权限即可解决

3.5创建 DMASM 磁盘组[DSC0]

在DSC0上使用dmasmtool工具创建DMASM磁盘组:

./dmasmtool DCR_INI=/dm8/config/dmdcr.ini
#创建日志磁盘组
create diskgroup 'DMLOG' asmdisk '/dev/raw/raw3'

#创建数据磁盘组
create diskgroup 'DMDATA' asmdisk '/dev/raw/raw4'

3.6配置dminit.ini[DSC0]

在/dm8/config 下创建dminit.ini文件，并添加以下内容：

db_name = dsc

system_path = +DMDATA/data

system = +DMDATA/data/dsc/system.dbf

system_size = 128

roll = +DMDATA/data/dsc/roll.dbf

roll_size = 128

main = +DMDATA/data/dsc/main.dbf

main_size = 128

ctl_path = +DMDATA/data/dsc/dm.ctl

ctl_size = 8

log_size = 256

dcr_path = /dev/raw/raw1 #dcr 磁盘路径，目前不支持 asm，只能是裸设备

dcr_seqno = 0

auto_overwrite = 1

[DSC0] #inst_name 跟 dmdcr_cfg.ini 中 DB 类型 group 中 DCR_EP_NAME 对应

config_path = /dm8/config/dsc0/DMDSC0

port_num = 5236

mal_host = 192.168.37.141

mal_port = 9236

log_path = +DMLOG/log/DMDSC001.log

log_path = +DMLOG/log/DMDSC002.log

[DSC1] #inst_name 跟 dmdcr_cfg.ini 中 DB 类型 group 中 DCR_EP_NAME 对应

config_path = /dm8/config/dsc0/DMDSC1

port_num = 5237

mal_host = 192.168.37.132

mal_port = 9236

log_path = +DMLOG/log/DMDSC101.log

log_path = +DMLOG/log/DMDSC102.log

3.7初始化实例[DSC0]

在/dm8/bin目录下输入以下命令，初始化数据库：

./dminit control=/dm8/config/dminit.ini

3.8复制实例文件

将DSC0上的DMDSC1文件复制到DSC1上的相应目录：

scp -r DMDSC1 192.168.37.132:/dm8/config/dsc1

3.9启动数据库服务器[DSC0 DSC1]

./dmasmsvr /dm8/config/dsc0/DMDSC0/dm.ini DCR_INI=/dm8/config/dmdcr.ini  ##DSC0

./dmserver /dm8/config/dsc1/DMDSC1/dm.ini dcr_ini=/dm8/config/dmdcr.ini  ##DSC1

四、配置监视器

4.1配置dmcssm.ini文件[DSC0]

在DSC0下的 /dm8/config 目录下创建dmcssm.ini文件并添加以下内容：

#和 dmdcr_cfg.ini 中的 DCR_OGUID 保持一致
CSSM_OGUID = 63635 
#配置所有 CSS 的连接信息，
#和 dmdcr_cfg.ini 中 CSS 配置项的 DCR_EP_HOST 和 DCR_EP_PORT 保持一致
CSSM_CSS_IP = 192.168.37.141:9341
CSSM_CSS_IP = 192.168.37.132:9343
CSSM_LOG_PATH =/dm8/log  #监视器日志文件存放路径
CSSM_LOG_FILE_SIZE = 1024#每个日志文件最大 32M
CSSM_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间

4.2开启监控器[DSC0]

配置好后在/dm8/bin目录下执行以下命令开启监控器：

./dmcssm INI_PATH=/dm8/config/dmcssm.ini

输入show查看DSC集群的状况

五、注册服务与启停

5.1注册服务[DSC0 DSC1]

要想DSC集群开机自启动的话，需要对实例、dmasm和dmcss注册服务：

DSC0：

##注册DMCSS服务
./dm_service_installer.sh -t dmcss -p DMCSS0 -dcr_ini /dm8/config/dmdcr.ini
##注册DMASM服务
./dm_service_installer.sh -t dmasmsvr -p DMASM0 -dcr_ini /dm8/config/dmdcr.ini -y DmCSSServiceDMCSS0
##注册DSC实例服务
./dm_service_installer.sh -t dmserver -p DSC0 -dm_ini /dm8/config/dsc0/DMDSC0/dm.ini -dcr_ini /dm8/config/dmdcr.ini -y DmASMSvrServiceDMASM0.service


 DSC1:

##注册DMDSC服务
./dm_service_installer.sh -t dmcss -p DMCSS1 -dcr_ini /dm8/config/dmdcr.ini
##注册DMASM服务
./dm_service_installer.sh -t dmasmsvr -p DMASM1 -dcr_ini /dm8/config/dmdcr.ini -y DmCSSServiceDMCSS1
##注册DSC实例服务
./dm_service_installer.sh -t dmserver -p DSC1 -dm_ini /dm8/config/dsc1/DMDSC1/dm.ini -dcr_ini /dm8/config/dmdcr.ini -y DmASMSvrServiceDMASM1.service

修改DSC0和DSC1的配置文件dmdcr.ini ：

将 DMDCR_ASM_RESTART_INTERVAL 与 DMDCR_DB_RESTART_INTERVAL值修改为不等于0 ，css即可自动拉起asm与server服务。

此处改为10，为超过设置的时间后，如果 DMASM 节点与DMDSC节点的 active 标记仍然为 FALSE，则 DMCSS 会执行自动拉起。

5.1集群启停顺序

启动顺序：

dmcss→dmasmsvr→dmserver

停止顺序：

dmserver→dmasmsvr→dmcss
DMDSC 环境 Disql 登录实例执行 stop instance，实例会正常退出，不影响其他活动节点正常运行。

六、验证

6.1验证搭建效果

DSC0和DSC1分别使用 disql 工具输入以下命令,查看两端的信息是否一致：

select * from v$dsc_ep_info;

6.2验证数据共享同步

在DSC0中输入以下命令创建表格并输入内容：

create table test(id int,name varchar(20));
insert into test values(1,'shanghai');
commit;
在DSC1中查询该表：

6.3数据归档

远程归档专门用于 DMDSC 环境中。在配置DMDSC时，需要配置远程归档：

DSC0：

ALTER DATABASE MOUNT;
ALTER DATABASE ARCHIVELOG;
ALTER DATABASE ADD ARCHIVELOG 'DEST=/dm8/config/dsc0/DMDSC0/arch,type=local,file_size=1024,space_limit=102400';
ALTER DATABASE ADD ARCHIVELOG 'DEST=DSC1,TYPE=REMOTE,FILE_SIZE=1024,SPACE_LIMIT=102400,INCOMING_PATH=/dm8/config/dsc0/DMDSC0/arch_remote';
alter database open;
 DSC1：

ALTER DATABASE MOUNT；
ALTER DATABASE ARCHIVELOG;
ALTER DATABASE ADD ARCHIVELOG 'DEST=/dm8/config/dsc1/DMDSC1/arch,type=local,file_size=1024,space_limit=102400';
alter database add archivelog 'dest=DSC0,type=remote,file_size=1024,space_limit=102400,incoming_path=/dm8/config/dsc1/DMDSC1/arch_remote';
alter database open;

总结：本文主要讲述了DSC（两节点）的搭建过程，如果错误，欢迎指正。

# ​一、DMDSC介绍