7.2 数据同步

以示例的形式介绍数据同步场景中DMDRS的搭建流程。

DMDSC到Oracle 11g

以源数据库DMDSC和目标数据库Oracle 11g为例，介绍在数据同步场景中DMDRS主备节点的搭建流程。

1 场景规划

业务规划

数据同步场景中已部署两个数据库，包括源数据库DMDSC（192.168.20.24、192.168.20.25）和目标数据库Oracle 11g（192.168.20.21），现需通过搭建DMDRS，将源数据库RESOURCES模式下表EMPLOYEE的全量数据和增量数据同步到目标数据库RESOURCES模式下的表EMPLOYEE中。
DSCOracle 11g数据同步主备.png

源DMDRS主备：捕获源数据库的数据，将捕获到的数据发送到目标DMDRS。
目标DMDRS：将接收的数据同步到目标数据库。

网络规划

DMDRS服务	IP地址和端口	连接数据库	说明
源DMDRS主节点	192.168.20.24:5345	源数据库 DMDSC 数据库服务名：DMDSC ASM服务的服务名：DMASM ASM服务的用户名/密码：asmsys/abcd 节点1：192.168.20.24:5236	源DMDRS主节点服务器需要安装DMDPI驱动与源数据库DMDSC连接。
源DMDRS备节点	192.168.20.25:5345	源数据库 DMDSC 数据库服务名：DMDSC ASM服务的服务名：DMASM ASM服务的用户名/密码：asmsys/abcd 节点2：192.168.20.25:5236	源DMDRS备节点服务器需要安装DMDPI驱动与源数据库DMDSC连接。
目标DMDRS	192.168.20.21:5345	目标数据库 Oracle 11g 192.168.20.21:1521/orcl	目标DMDRS服务器需要安装OCI驱动与目标数据库Oracle 11g连接。

目录规划

源数据库、源DMDRS服务和目标DMDRS服务相关的目录规划如下表所示。

目录类型	目录名	目录示例
源数据库	数据库归档文件目录	0#+DMDATA/arch_dsc0 1#+DMDATA/arch_dsc1
源数据库	数据库DDL同步脚本目录	/home/dmdrs/dmdrs5/bin/scripts
源DMDRS主节点	安装目录	/home/dmdrs/dmdrs5
	执行程序目录	/home/dmdrs/dmdrs5/bin
	配置文件路径	/home/dmdrs/dmdrs5/bin/cpt_dsc_master.xml
	服务脚本模板目录	/home/dmdrs/dmdrs5/bin/service_template
	服务脚本目录	/home/dmdrs/dmdrs5/bin
	console远程控制工具	/home/dmdrs/dmdrs5/bin/drcsl
源DMDRS备节点	安装目录	/home/dmdrs/dmdrs5
	执行程序目录	/home/dmdrs/dmdrs5/bin
	配置文件路径	/home/dmdrs/dmdrs5/bin/cpt_dsc_slave.xml
	服务脚本模板目录	/home/dmdrs/dmdrs5/bin/service_template
	服务脚本目录	/home/dmdrs/dmdrs5/bin
	console远程控制工具	/home/dmdrs/dmdrs5/bin/drcsl
目标DMDRS	安装目录	/home/dmdrs/dmdrs5
	执行程序目录	/home/dmdrs/dmdrs5/bin
	配置文件路径	/home/dmdrs/dmdrs5/bin/exec.xml
	服务脚本模板目录	/home/dmdrs/dmdrs5/bin/service_template
	服务脚本目录	/home/dmdrs/dmdrs5/bin
	console远程控制工具	/home/dmdrs/dmdrs5/bin/drcsl

2 设置DMDRS运行用户

设置源DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限，并设置运行用户同数据库归档文件所在目录属同一用户组，此用户组应对归档文件所在目录及子目录有读权限。
设置目标DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限。

3 设置环境变量

在源DMDRS服务器的环境变量中添加DMDPI驱动文件路径，在目标DMDRS的服务器的环境变量中添加Oracle OCI驱动文件路径。

打开.bash_profile配置文件。
```
$ vi ~/.bash_profile
```
在.bash_profile配置文件末尾增加驱动路径。
- 源DMDRS服务器环境变量中添加DMDPI驱动路径。
```
export LD_LIBRARY_PATH=<DMDPI驱动路径>:$LD_LIBRARY_PATH
```
- 目标DMDRS服务器环境变量中添加Oracle OCI驱动路径。
```
export LD_LIBRARY_PATH=<OCI驱动路径>:$LD_LIBRARY_PATH
```
保存并退出vi编辑器，使环境变量生效。
```
$ source ~/.bash_profile
```
查看环境变量是否设置成功。
```
$ echo $LD_LIBRARY_PATH
```

4 开启源数据库的归档和逻辑日志

使用动态配置的方式开启源数据库DMDSC的所有节点的归档和逻辑日志（以2节点为例）。

EP01节点

挂载源数据库。
```
SQL> alter database mount;
```
开启源数据库归档模式。
```
SQL> alter database archivelog;
```

源数据库添加本地归档日志配置项。

SQL> alter database add archivelog 'DEST= +DMDATA/arch_dsc0,TYPE=LOCAL,FILE_SIZE=512,SPACE_LIMIT=10240';

源数据库添加远程节点归档日志配置项。

SQL> alter database add archivelog 'INCOMING_PATH=+DMDATA/arch_dsc1,DEST=DSC1,TYPE=REMOTE,FILE_SIZE=512,SPACE_LIMIT=10240';

开启源数据库。
```
SQL> alter database open;
```

配置源数据库逻辑日志。

SQL> call sp_set_para_value(1,'RLOG_APPEND_LOGIC',1);

EP02节点

挂载源数据库。
```
SQL> alter database mount;
```
开启源数据库归档模式。
```
SQL> alter database archivelog;
```

源数据库添加本地归档日志配置项。

SQL> alter database add archivelog 'DEST= +DMDATA/arch_dsc1,TYPE=LOCAL,FILE_SIZE=512,SPACE_LIMIT=10240';

源数据库添加远程节点归档日志配置项。

SQL> alter database add archivelog 'INCOMING_PATH=+DMDATA/arch_dsc0,DEST=DSC0,TYPE=REMOTE,FILE_SIZE=512,SPACE_LIMIT=10240';

开启源数据库。
```
SQL> alter database open;
```

配置源数据库逻辑日志。

SQL> call sp_set_para_value(1,'RLOG_APPEND_LOGIC',1);

5 开启源数据库的DSC_TRX_VIEW_SYNC参数

使用动态配置的方式开启DSC_TRX_VIEW_SYNC参数。

在源数据库DMDSC的任一节点上调用系统过程SP_SET_PARA_VALUE，将DMDSC所有节点的配置文件“dm.ini”中DSC_TRX_VIEW_SYNC参数值设置为1。此系统过程的定义请参考《DM8_SQL语言使用手册》。

SQL> call sp_set_para_value(1,'DSC_TRX_VIEW_SYNC',1);

6 配置DDL同步

使用触发器方式配置DDL同步。

注意

创建DDL触发器和辅助表时，请使用具有DBA权限的用户。

如果触发器或辅助表无效或缺失，会导致DDL同步失败，甚至会影响数据库。

在源数据库DMDSC上执行“ddl_sql_dm8.sql”脚本创建触发器和辅助表，脚本默认位置在DMDRS执行程序目录下的scripts子目录中。

SQL> set define off;
SQL> start ddl_sql_dm8.sql

7 配置DMDRS服务

介绍源DMDRS服务和目标DMDRS服务的配置方法。

说明
以下DMDRS服务的配置文件仅为示例，在实际应用场景中，请根据实际搭建环境修改配置文件中的参数配置，具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》。

7.1 配置目标DMDRS服务

在目标DMDRS服务的配置文件目录，打开并修改exec.xml配置文件，修改后配置文件如下所示。

注意
配置文件中的siteid为必配参数，配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性，如果重复，会造成链路中数据复制的混乱。

<?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>站点号</siteid>
    </base>
    <exec>
        <name>exec_ora</name>
        <login>
            <dbtype>oracle</dbtype>
            <server>192.168.20.21:1521/orcl</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
        </login>
    </exec>
</drs>

7.2 配置源DMDRS主节点服务

在源DMDRS主节点服务的配置文件目录，打开并修改cpt_dsc_master.xml配置文件，修改后配置文件如下所示。

注意

配置文件中的siteid为必配参数，配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性，如果重复，会造成链路中数据复制的混乱。

配置文件中的siteid为必配参数，配置时请确保DMDRS主节点和DMDRS备节点服务站点号一致，如果不一致，会造成主备链路中数据复制的混乱。

<?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>站点号</siteid>
    </base>
    <cpt>
        <name>cpt_dsc</name>
        <login>
            <dbtype>dsc</dbtype>
            <server>DMDSC</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
        </login>
        <send>
            <ip>192.168.20.21</ip>
            <port>5345</port>
            <target_name>exec_ora</target_name>
            <map>
                <item>RESOURCES.EMPLOYEE==RESOURCES.EMPLOYEE</item>
            </map>
        </send>
        <rac>
            <nodes>2</nodes>
            <rac_type>ASM</rac_type>
            <login>
                <server>DMASM</server>
                <user>asmsys</user>
                <pwd>abcd</pwd>
            </login>
            <arch_dir>
                <item>0#+DMDATA/arch_dsc0</item>
                <item>1#+DMDATA/arch_dsc1</item>
            </arch_dir>
        </rac>
        <cluster>
            <mode>master</mode>
            <standby>
                <item>
                    <ip>192.168.20.25</ip>
                    <port>5345</port>
                    <target_name>cpt_dsc</target_name>
                </item>
            </standby>
        </cluster>
    </cpt>
</drs>

7.3 配置源DMDRS备节点服务

在源DMDRS备节点服务的配置文件目录，打开并修改cpt_dsc_slave.xml配置文件，修改后配置文件如下所示。

注意

配置文件中的siteid为必配参数，配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性，如果重复，会造成链路中数据复制的混乱。

配置文件中的siteid为必配参数，配置时请确保DMDRS主节点和DMDRS备节点服务站点号一致，如果不一致，会造成主备链路中数据复制的混乱。

<?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>站点号</siteid>
    </base>
    <cpt>
        <name>cpt_dsc</name>
        <login>
            <dbtype>dsc</dbtype>
            <server>DMDSC</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
        </login>
        <send>
            <ip>192.168.20.21</ip>
            <port>5345</port>
            <target_name>exec_ora</target_name>
            <map>
                <item>RESOURCES.EMPLOYEE==RESOURCES.EMPLOYEE</item>
            </map>
        </send>
        <rac>
            <nodes>2</nodes>
            <rac_type>ASM</rac_type>
            <login>
                <server>DMASM</server>
                <user>asmsys</user>
                <pwd>abcd</pwd>
            </login>
            <arch_dir>
                <item>0#+DMDATA/arch_dsc0</item>
                <item>1#+DMDATA/arch_dsc1</item>
            </arch_dir>
        </rac>
        <cluster>
            <mode>slave</mode>
        </cluster>
    </cpt>
</drs>

8 运行DMDRS服务

按照服务的运行顺序，启动目标DMDRS服务、源DMDRS主节点服务和源DMDRS备节点服务。

8.1 启动目标DMDRS服务

将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。
```
$ cp TemplateService ../DrsService
```

打开并修改DrsService服务脚本中的相关配置参数。

$ vi DrsService

INSTALL_HOME=/home/dmdrs/dmdrs5
PROG_DIR=/home/dmdrs/dmdrs5/bin
CONF_PATH=/home/dmdrs/dmdrs5/bin/exec.xml
EXEC_PROG_NAME=drsvr
SERVICE_TYPE_NAME="drs server"

启动目标DMDRS服务。
```
$ ./DrsService start
```

8.2 启动源DMDRS主节点服务

将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。
```
$ cp TemplateService ../DrsService
```

打开并修改DrsService服务脚本中的相关配置参数。

$ vi DrsService

INSTALL_HOME=/home/dmdrs/dmdrs5
PROG_DIR=/home/dmdrs/dmdrs5/bin
CONF_PATH=/home/dmdrs/dmdrs5/bin/cpt_dsc_master.xml
EXEC_PROG_NAME=drsvr
SERVICE_TYPE_NAME="drs server"

启动源DMDRS主节点服务。
```
$ ./DrsService start
```

8.3 启动源DMDRS备节点服务

将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。
```
$ cp TemplateService ../DrsService
```

打开并修改DrsService服务脚本中的相关配置参数。

$ vi DrsService

INSTALL_HOME=/home/dmdrs/dmdrs5
PROG_DIR=/home/dmdrs/dmdrs5/bin
CONF_PATH=/home/dmdrs/dmdrs5/bin/cpt_dsc_slave.xml
EXEC_PROG_NAME=drsvr
SERVICE_TYPE_NAME="drs server"

启动源DMDRS备节点服务。
```
$ ./DrsService start
```

8.4 启动源DMDRS主节点服务中的CPT模块

使用服务脚本启动服务后，需要使用远程控制台对服务中的模块执行启动命令。

启动控制台。
```
$ ./drcsl cpt_dsc_master.xml
```
连接源DMDRS服务。
```
CSL> connect
```
设置数据库当前最新的日志LSN作为日志解析的起始位置。如需指定归档文件作为起始位置，请参考《DMDRS控制台命令手册》进行设置。
```
CSL> alter cpt_dsc set lsn
```
启动源DMDRS主节点服务中的CPT模块。
```
CSL> start
```
将源数据库中RESOURCES模式下的表EMPLOYEE添加同步，并在同步之前把源端表的全量数据装载到目标数据库。

根据不同需求可以使用不同的数据装载掩码，掩码说明具体请参见《DMDRS控制台命令手册》的添加同步表章节。
```
CSL> alter cpt_dsc add table "sch.name='RESOURCES' and tab.name='EMPLOYEE'"
```
使用命令查看数据装载的监控信息，具体命令请参见《DMDRS控制台命令手册》。

9 验证同步结果

在源数据库表RESOURCES.EMPLOYEE中插入数据，如果插入的数据能正确地同步到目标数据库，则表示数据同步成功。

达梦数据复制软件DMDRS主备搭建部署示例：源数据库DMDSC到目标数据库Oracle 11g一对一数据同步

DMDSC到Oracle 11g

1 场景规划

2 设置DMDRS运行用户

3 设置环境变量

4 开启源数据库的归档和逻辑日志

5 开启源数据库的DSC_TRX_VIEW_SYNC参数

6 配置DDL同步

7 配置DMDRS服务

7.1 配置目标DMDRS服务

7.2 配置源DMDRS主节点服务

7.3 配置源DMDRS备节点服务

8 运行DMDRS服务

8.1 启动目标DMDRS服务

8.2 启动源DMDRS主节点服务

8.3 启动源DMDRS备节点服务

8.4 启动源DMDRS主节点服务中的CPT模块

9 验证同步结果

作者