说明运行DMDRS前,请确保源DMDRS与目标DMDRS服务器上已安装正确版本的数据库驱动。
业务规划
在DM8到DSS到DM8/DM8(同时一对多分发)数据分发场景中,需要动态新增目标数据库C Oracle 11g,搭建部署源数据库到目标数据库C的同步,将源数据库PERSON模式和SALES模式下所有表的全量数据和增量数据复制到目标数据库C Oracle 11g。
源DMDRS:捕获源数据库的数据,将捕获到的数据发送到DMDSS。
DMDSS:缓存数据流并向目标DMDRS A、目标DMDRS B和目标DMDRS C分发数据。
目标DMDRS A:将接收的数据复制到目标数据库A DM8。
目标DMDRS B:将接收的数据复制到目标数据库B DM8。
目标DMDRS C:将接收的数据复制到目标数据库C Oracle 11g。
网络规划
| DMDRS服务 | IP地址和端口 | 连接数据库 | 说明 |
|---|---|---|---|
| 源DMDRS | 192.168.20.24:5345 | 源数据库 DM8 192.168.20.24:5236 |
源DMDRS服务器需要安装DMDPI驱动与源数据库DM8连接。 |
| DMDSS | 192.168.20.23:5345 | / | / |
| 目标DMDRS A | 192.168.20.21:5345 | 目标数据库A DM8 192.168.20.21:5236 |
目标DMDRS A服务器需要安装DMDPI驱动与目标数据库A DM8连接。 |
| 目标DMDRS B | 192.168.20.22:5345 | 目标数据库B DM8 192.168.20.22:5236 |
目标DMDRS B服务器需要安装DMDPI驱动与目标数据库B DM8连接。 |
| 目标DMDRS C | 192.168.20.25:5345 | 目标数据库C Oracle 11g 192.168.20.25:1521 网络服务名:orcl |
目标DMDRS B服务器需要安装OCI驱动与目标数据库Oracle 11g连接。 |
目录规划
源数据库、源DMDRS服务、DMDSS服务、目标DMDRS A服务、目标DMDRS B服务和目标DMDRS C服务相关的目录规划如下表所示。
| 目录类型 | 目录名 | 目录示例 |
|---|---|---|
| 源数据库 | 数据库归档文件目录 | /dm8/data/arch |
| 数据库DDL同步脚本目录 | /home/dmdrs/dmdrs5/bin/scripts | |
| 源DMDRS | 安装目录 | /home/dmdrs/dmdrs5 |
| 执行程序目录 | /home/dmdrs/dmdrs5/bin | |
| 配置文件路径 | /home/dmdrs/dmdrs5/bin/cpt.xml | |
| 服务脚本模板目录 | /home/dmdrs/dmdrs5/bin/service_template | |
| 服务脚本目录 | /home/dmdrs/dmdrs5/bin | |
| console远程控制工具 | /home/dmdrs/dmdrs5/bin | |
| DMDSS | 安装目录 | /home/dmdrs/dmdrs5 |
| 执行程序目录 | /home/dmdrs/dmdrs5/bin | |
| 配置文件路径 | /home/dmdrs/dmdrs5/bin/dss.xml | |
| 服务脚本模板目录 | /home/dmdrs/dmdrs5/bin/service_template | |
| 服务脚本目录 | /home/dmdrs/dmdrs5/bin | |
| 日志流的存储路径 | /home/dmdrs/dmdrs5/bin/logfile | |
| 目标DMDRS A | 安装目录 | /home/dmdrs/dmdrs5 |
| 执行程序目录 | /home/dmdrs/dmdrs5/bin | |
| 配置文件路径 | /home/dmdrs/dmdrs5/bin/exec.xml | |
| 服务脚本模板目录 | /home/dmdrs/dmdrs5/bin/service_template | |
| 服务脚本目录 | /home/dmdrs/dmdrs5/bin | |
| console远程控制工具 | /home/dmdrs/dmdrs5/bin/drcsl | |
| 目标DMDRS B | 安装目录 | /home/dmdrs/dmdrs5 |
| 执行程序目录 | /home/dmdrs/dmdrs5/bin | |
| 配置文件路径 | /home/dmdrs/dmdrs5/bin/exec.xml | |
| 服务脚本模板目录 | /home/dmdrs/dmdrs5/bin/service_template | |
| 服务脚本目录 | /home/dmdrs/dmdrs5/bin | |
| console远程控制工具 | /home/dmdrs/dmdrs5/bin/drcsl | |
| 目标DMDRS C | 安装目录 | /home/dmdrs/dmdrs5 |
| 执行程序目录 | /home/dmdrs/dmdrs5/bin | |
| 配置文件路径 | /home/dmdrs/dmdrs5/bin/exec.xml | |
| 服务脚本模板目录 | /home/dmdrs/dmdrs5/bin/service_template | |
| 服务脚本目录 | /home/dmdrs/dmdrs5/bin | |
| console远程控制工具 | /home/dmdrs/dmdrs5/bin/drcsl |
设置目标DMDRS C服务的运行用户对各自服务所在目录及子目录的读、写和执行权限。
在目标DMDRS C服务器的环境变量中添加Oracle OCI驱动文件路径。
打开.bash_profile配置文件。
$ vi ~/.bash_profile
在.bash_profile配置文件末尾增加Oracle OCI驱动路径。
export LD_LIBRARY_PATH=<OCI驱动路径>:$LD_LIBRARY_PATH
保存并退出vi编辑器,使环境变量生效。
$ source ~/.bash_profile
查看环境变量是否设置成功。
$ echo $LD_LIBRARY_PATH
说明以下DMDRS服务的配置文件仅为示例,在实际应用场景中,请根据实际搭建环境修改配置文件中的参数配置,具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》。
在目标DMDRS C服务的配置文件目录,打开并修改exec.xml配置文件,修改后配置文件如下所示。
注意配置文件中的siteid为必配参数,配置时请确保源DMDRS、DMDSS和目标DMDRS服务站点号的唯一性,如果重复,会造成链路中数据复制的混乱。
说明新增目标库的起始消费LSN配置为-1,从当前Topic的末尾位置开始消费。
<?xml version="1.0" encoding="GB18030"?>
<drs>
<base>
<mgr_port>5345</mgr_port>
<siteid>站点号</siteid>
</base>
<exec>
<name>exec_oracle</name>
<dss>
<item>
<name>dss_dm8</name>
<ip>192.168.20.23</ip>
<port>5345</port>
<topic>cpt_dm8</topic>
<map>
<item>PERSON.*==PERSON.*</item>
<item>SALES.*==SALES.*</item>
</map>
<start_lsn>-1</start_lsn>
</item>
</dss>
<login>
<dbtype>Oracle</dbtype>
<server>orcl</server>
<user>DMDRS</user>
<pwd>DMDRS</pwd>
</login>
<group>
<item>
<id>35</id>
<exec_policy>0</exec_policy>
<desc>
<table>*.*</table>
</desc>
</item>
</group>
</exec>
</drs>
将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。
$ cp TemplateService ../DrsService
打开并修改DrsService服务脚本中的相关配置参数。
$ vi DrsService
INSTALL_HOME=/home/dmdrs/dmdrs5 PROG_DIR=/home/dmdrs/dmdrs5/bin CONF_PATH=/home/dmdrs/dmdrs5/bin/exec.xml EXEC_PROG_NAME=drsvr SERVICE_TYPE_NAME="drs server"
启动目标DMDRS C服务。
$ ./DrsService start
增加“SALES.*==SALES.*”的映射规则。
alter cpt_dm8 add map "SALES.*==SALES.*"
使当前所有修改命令生效。
alter cpt_dm8 confirm
将源数据库中PERSON和SALES模式下所有的表添加同步,添加后将源数据库的全量数据装载到目标数据库C,并将增量数据同步到目标数据库C。
根据不同需求可以使用不同的数据装载掩码,掩码说明具体请参见《DMDRS控制台命令手册》的添加同步表章节。
说明使用SITE装载掩码,指定目标库C的装载站点号。
CSL> alter cpt_dm8 add table "sch.name='PERSON' or sch.name='SALES'" DROP|CREATE|INSERT|SITE|"5"
在源数据库中RESOURCES模式、PERSON模式和SALES模式下所有的表中分别插入数据,如果插入的数据能正确地同步到目标数据库A、目标数据库B和目标数据库C,则表示数据分发同步成功。
文章
阅读量
获赞
