注册
数据守护集群搭建
专栏/技术分享/ 文章详情 /

数据守护集群搭建

LHX 2023/12/12 1068 0 1
摘要

主、备、monitor节点都进行os层配置
systemctl stop firewalld
systemctl disable firewalld

vi /etc/selinux/config
SELINUX=disabled
reboot

  1. 创建安装用户组 dinstall。
    groupadd dinstall
  2. 创建安装用户 dmdba。
    mkdir -p /home/dmdba
    useradd -g dinstall -m -d /home/dmdba/dm -s /bin/bash dmdba
  3. 初始化用户密码。
    passwd dmdba
    dmdba@1234

vi /etc/security/limits.conf
dmdba soft nofile 65536
dmdba hard nofile 65536
dmdba soft nproc 10240
dmdba hard nproc 10240
dmdba soft core unlimited
dmdba hard core unlimited

ulimit -a
#ulimit -c unlimited
#ulimit -n 65535
echo "/dbdata/dmdata/DAMENG/core-%e-%p-%t"> /proc/sys/kernel/core_pattern

mkdir /dbdata/dmdata/ /dbbak/dmbak /dbarch/dmarch /opt/dm /home/dmdba/dm/nmon_log -p
上传,将dm.ini(BUFFER设为内存的40% MAX_BUFFER50% )、dmarch.ini(ARCH_SPACE_LIMIT存储的80%) 、sqllog.ini、dm.key放入/opt/dm目录下。
chown -R dmdba:dinstall /dbdata /dbbak /dbarch /home/dmdba /opt/dm

安装包上传到/opt目录下
unzip dm8_20230418_x86_rh6_64.zip

挂载镜像
mount -o loop /opt/dm7_20230512_x86_rh6_64.iso /mnt

数据库安装
su - dmdba

cd /mnt/

./DMInstall.bin -i

##企业版和安全版有对应的key,安全版必须要安装时将key打上,/bin/dm.key
##/home/dmdba/ 安装目录,250G左右

root执行
/home/dmdba/script/root/root_installer.sh

##cd /home/dmdba/bin
##./DmAPService start

添加环境变量
cd /home/dmdba/dm
vim .bash_profile

export PATH=$PATH:$DM_HOME/bin:$DM_HOME/tool

source .bash_profile

------- monitor安装到初始化之前。

初始化实例
su - dmdba
命令行配置实例,(匹配ORACLE要加参数 blank_pad_mode=1 取值:1兼容ORA,0不兼容;CHARSET=1 取值:1为UTF-8 )
cd /home/dmdba/dm/dmdbms/bin
./dminit path=/dbdata/dmdata/ PAGE_SIZE=32 EXTENT_SIZE=16 CASE_SENSITIVE=y LOG_SIZE=2048
./dminit path=/dbdata/dmdata/ PAGE_SIZE=32 EXTENT_SIZE=16 CASE_SENSITIVE=y DB_NAME=DAMENG INSTANCE_NAME=DBSERVER PORT_NUM=5237 LOG_SIZE=2048

##图形界面化配置实例(用当前用户执行 xhost +,切换到 dmdba 用户,执行export DISPLAY=:0,再执行 xhost +命令。)
##cd /home/dmdba/tool/
##./dbca.sh

dm.ini文件放入/home/dmdba/dm/dmdbms/bin目录下,dmarch.ini与sqllog.ini放入数据目录下并替换。
cd /opt/dm/
cp dm.ini /home/dmdba/dm/dmdbms/bin
cp dmarch.ini sqllog.ini /dbdata/dmdata/DAMENG/
dm.ini(BUFFER设为内存的40%,单位M MAX_BUFFER50% 实例名INSTANCE_NAME)、dmarch.ini(ARCH_SPACE_LIMIT存储的80%)
vi /home/dmdba/dm/dmdbms/bin/dm.ini
vi /dbdata/dmdata/DAMENG/dmarch.ini

配置启动脚本/bin/service_template/DmService 为dmserverd,
cd /home/dmdba/dm/dmdbms/bin/service_template/
cp DmService ../dmserverd
cd ../
vi dmserverd
INI_PATH=/home/dmdba/dm/dmdbms/bin/dm.ini
修改ini文件目录为/home/dmdba/dm/dmdbms/dm.ini
使用root用户
cp /home/dmdba/dm/dmdbms/bin/dmserverd /etc/rc.d/init.d/

chkconfig dmserverd on
chkconfig dmserverd --list
(2,3,4,5应都为启用状态)

客户端的安装配置
su - dmdba
vi /etc/dm_svc.conf
添加
char_chk=(0) #忽略字符检查
direct=(n) #不使用快速装载
dummy=(y) #导入导出时选择覆盖

启动库
cd /home/dmdba/dm/dmdbms/bin
./dmserverd start

umount /mnt


主备停库
cd /home/dmdba/dm/dmdbms/bin
./dmserverd stop

主库
./dmrman CTLSTMT="BACKUP DATABASE '/home/dmdba/dm/dmdbms/bin/dm.ini' FULL TO BACKUP_FILE1 BACKUPSET '/dbdata/dmdata/DAMENG/BACKUP_FILE_01'"
cd /dbdata/dmdata/DAMENG/
scp -rp BACKUP_FILE_01/ dmdba@192.168.124.129:/dbdata/dmdata/DAMENG/

备库恢复
cd /home/dmdba/dm/dmdbms/bin
./dmrman CTLSTMT="RESTORE DATABASE '/home/dmdba/dm/dmdbms/bin/dm.ini' FROM BACKUPSET '/dbdata/dmdata/DAMENG/BACKUP_FILE_01'"
./dmrman CTLSTMT="RECOVER DATABASE '/home/dmdba/dm/dmdbms/bin/dm.ini' FROM BACKUPSET '/dbdata/dmdata/DAMENG/BACKUP_FILE_01'"

两个库mount 不要kill进程
cd /home/dmdba/dm/dmdbms/bin
./dmserver /home/dmdba/dm/dmdbms/bin/dm.ini mount

disql
select file_LSN, cur_LSN from v$rlog;
select permanent_magic;

修改主dm.ini
vi /home/dmdba/dm/dmdbms/bin/dm.ini

#实例名,建议使用―组名_守护环境_序号‖的命名方式,总长度不能超过 16
INSTANCE_NAME = DMSERVER01 #备库为DMSERVER02
PORT_NUM = 5236 #数据库实例监听端口
DW_PORT = 1141 #守护环境下,监听守护进程连接端口
DW_ERROR_TIME = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
HA_INST_CHECK_FLAG = 1 #检测是否多个实例进程同时启动
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息

修改备库dm.ini
vi dm.ini
INSTANCE_NAME = DMSERVER02#主库为DMSERVER01
PORT_NUM = 5236 #数据库实例监听端口
DW_PORT = 1142 #守护环境下,监听守护进程连接端口
DW_ERROR_TIME = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
HA_INST_CHECK_FLAG = 1 #检测是否多个实例进程同时启动
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息

修改主备dmmal.ini
每个库都需要配置dmmal.ini,且配置一致
vi /dbdata/dmdata/DAMENG/dmmal.ini
MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = DMSERVER01 #实例名,和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.124.100 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 2141 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.124.100 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口,和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 3141 #实例对应的守护进程监听 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = DMSERVER02
MAL_HOST = 192.168.124.129
MAL_PORT = 2142
MAL_INST_HOST = 192.168.124.129
MAL_INST_PORT = 5236
MAL_DW_PORT = 3142

修改 主库dmarch.ini
当前实例 DMSERVER01 是主库,需要向 DMSERVER02(实时备库)同步数据,因此实 时归档的 ARCH_DEST 配置为 GRP1_RT_02。
vi /dbdata/dmdata/DAMENG/dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = DMSERVER02 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dbarch/dmarch
ARCH_FILE_SIZE = 2048
ARCH_SPACE_LIMIT = 1024000

修改备库dmarch.ini
vi /dbdata/dmdata/DAMENG/dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = DMSERVER01 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dbarch/dmarch
ARCH_FILE_SIZE = 2048
ARCH_SPACE_LIMIT = 1024000

主、备库配置dmwatcher.ini,主备库完全一致
vi /dbdata/dmdata/DAMENG/dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453331 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dm/dmdbms/bin/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dm/dmdbms/bin/dmserverd start #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值,默认关闭

备库配置 dmwatcher.ini
vi /dbdata/dmdata/DAMENG/dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453331 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dm/dmdbms/bin/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dm/dmdbms/bin/dmserverd start #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值,默认关闭

主库
cd /home/dmdba/dm/dmdbms/bin
./dmctlcvt TYPE=3 SRC=/dbdata/dmdata/DAMENG/dmwatcher.ini DEST=/dbdata/dmdata/
拷贝生成的 dmwatcher.ctl 文件分别拷贝到各个数据库目录下即可。
cp /dbdata/dmdata/GRP1/dmwatcher.ctl /dbdata/dmdata/DAMENG/
scp -r /dbdata/dmdata/GRP1/dmwatcher.ctl dmdba@192.168.124.129:/dbdata/dmdata/DAMENG/

主备库修改oguid,要放在修改数据库模式之前,备库无法修改该参数。
SQL>sp_set_oguid(453331);
select oguid from v$instance;

主库修改模式
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>alter database primary;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

修改备库模式
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>alter database standby;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

#monitor节点配置,monitor节点只需要安装服务端
修改 dmmonitor.ini 配置确认监视器,其中 MON_DW_IP 中的 IP 和 PORT 和 dmmal.ini 中的 MAL_HOST 和 MAL_DW_PORT 配置项保持一致。
su - dmdba
vi /dbdata/dmdata/dmmonitor.ini
MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /home/dmdba/dm/dmdbms/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间
[GRP1]
MON_INST_OGUID = 453331 #组 GRP1 的唯一 OGUID 值
#以下配置为监视器到组 GRP1 的守护进程的连接信息,以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.124.100:3141
MON_DW_IP = 192.168.124.129:3142

主备节点先退出mount模式,启动dmwatcher

#启动主备节点服务dmwatcher,守护进程启动后,进入 Startup 状态,此时实例都处于 Mount 状态。守护进程开始 广播自身和其监控实例的状态信息,结合自身信息和远程守护进程的广播信息,守护#进程将 本地实例 Open,并切换为 Open 状态。
cd /home/dmdba/dm/dmdbms/bin/
./dmwatcher /dbdata/dmdata/DAMENG/dmwatcher.ini
启动后不要退出

monitor节点
cd /home/dmdba/dm/dmdbms/bin/
./dmmonitor /dbdata/dmdata/dmmonitor.ini

主备节点
cd /home/dmdba/dm/dmdbms/bin/service_template/
cp DmWatcherService ../dmwatcherd
vi ../dmwatcherd
INI_PATH=/dbdata/dmdata/DAMENG/dmwatcher.ini

使用root用户
cp /home/dmdba/dm/dmdbms/bin/dmwatcherd /etc/rc.d/init.d/
scp -r /etc/rc.d/init.d/dmwatcherd root@192.168.124.129:/etc/rc.d/init.d/
chkconfig dmwatcherd on
chkconfig dmwatcherd --list

退出之前的./dmwatcher进程,exit
su - dmdba
cd /home/dmdba/dm/dmdbms/bin
./dmwatcherd start

cd /dbdata/dmdata/
cp dmmonitor.ini dmmonitor_0.ini
vi dmmonitor_0.ini
MON_DW_CONFIRM = 0
cd /home/dmdba/dm/dmdbms/bin/
./dmmonitor /dbdata/dmdata/dmmonitor_0.ini

测试:
SQL> create table test (a varchar2(100),b varchar2(100));
SQL>insert into test a values (1,2);
SQL>commit;
SQL> select * from test;

注册服务

使用root用户
cd /home/dmdba/dm/dmdbms/script/root/
主库
./dm_service_installer.sh -t dmwatcher -p dmwatcherd -i /dbdata/dmdata/DAMENG/dmwatcher.ini

备库
./dm_service_installer.sh -t dmwatcher -p dmwatcherd -i /dbdata/dmdata/DAMENG/dmwatcher.ini

Monitor服务器
./dm_service_installer.sh -t dmmonitor -p dmmonitord -i /dbdata/dmdata/dmmonitor.ini

服务名:DmWatcherServicedmwatcherd、DmWatcherServicedmwatcherd、DmMonitorServicedmmonitord

重启顺序

主备集群重启有顺序要求:

1.关闭监视器:systemctl stop DmMonitorServicedmmonitord

2.关闭主库守护进程:systemctl stop DmWatcherServicedmwatcherd

3.关闭备库守护进程:systemctl stop DmWatcherServicedmwatcherd

4.关闭主库实例:systemctl stop dmserverd

5.关闭备库实例:systemctl stop dmserverd

6.启动主库实例:systemctl start dmserverd

7.启动备库实例:systemctl start dmserverd

8.启动主库守护进程:systemctl start DmWatcherServicedmwatcherd

9.启动备库守护进程:systemctl start DmWatcherServicedmwatcherd

10.启动监视器:systemctl start DmMonitorServicedmmonitord

注意启动和关闭顺序!!

启动:主备库实例 → 主备库守护进程 → 监视器

关闭:监视器 → 主备库守护进程 → 主备库实例

配置dm_svc.conf
在/etc 目录下会自动生成集群的dm_svc.conf配置文件,请自行复制它到客户端机器的相关目录下:
dm_svc.conf配置文件,Windows平台下位于%SystemRoot%\system32目录,Linux平台下位于/etc目录。
DM_DW=(192.168.13.142:5236,192.168.13.155:5236)
[DM_DW]
LOGIN_MODE=(1)
char_chk=(0) #忽略字符检查
direct=(n) #不使用快速装载
dummy=(y) #导入导出时选择覆盖

#以下参数为读写分离集群配置
RW_SEPARATE=(1)#是否开启读写分离
RW_PERCENT=(25)#读写分离比,0-100,按需配置
此处需要注意将服务名(红色字体部分)改为:DM_DW 或自己需要的。应用接口中ip配置替换为DM_DW
e.g. jdbc连接串:
jdbc:dm://DM_DW

达梦社区地址 https://eco.dameng.com

评论
后发表回复

作者

文章

阅读量

获赞

扫一扫
联系客服