注册
达梦数据复制软件DMDRS搭建部署示例:源数据库MySQL到目标数据库DM8一对一数据同步(远程读)
专栏/数+融合专栏/ 文章详情 /

达梦数据复制软件DMDRS搭建部署示例:源数据库MySQL到目标数据库DM8一对一数据同步(远程读)

达梦数+数据融合软件(DMDF)产品团队 2026/07/28 151 0 0
摘要 以源数据库为MySQL,目标数据库为DM8为例,介绍在一对一数据同步场景中DMDRS远程读的搭建流程。

1 场景规划

业务规划

数据同步场景中已部署两个数据库,包括源数据库MySQL(192.168.20.22)和目标数据库DM8(192.168.20.21),由于DMDRS不能搭建在源数据库上,现需要通过在其他服务器上搭建DMDRS,DMDRS远程读取源数据库的归档日志,将源数据库RESOURCES模式下所有表的全量数据和增量数据同步到目标数据库的RESOURCES模式。

MySQLDM8数据同步一对一(远程读).png

  • 源DMDRS:捕获源数据库的数据,将捕获到的数据发送到目标DMDRS。

  • 目标DMDRS:将接收的数据同步到目标数据库。

网络规划

DMDRS服务 IP地址和端口 连接数据库 说明
源DMDRS 192.168.20.24:5345 源数据库 MySQL 192.168.20.22:3306 源DMDRS服务器需要安装MySQL C API驱动与源数据库MySQL连接。
目标DMDRS 192.168.20.21:5345 目标数据库 DM8 192.168.20.21:5236 目标DMDRS服务器需要安装DMDPI驱动与目标数据库DM8连接。

目录规划

源DMDRS服务和目标DMDRS服务相关的目录规划如下表所示。

目录类型 目录名 目录示例
源DMDRS服务 安装目录 /home/dmdrs/dmdrs5
执行程序目录 /home/dmdrs/dmdrs5/bin
配置文件路径 /home/dmdrs/dmdrs5/bin/cpt.xml
服务脚本模板目录 /home/dmdrs/dmdrs5/bin/service_template
服务脚本目录 /home/dmdrs/dmdrs5/bin
console远程控制工具 /home/dmdrs/dmdrs5/bin/drcsl
目标DMDRS服务 安装目录 /home/dmdrs/dmdrs5
执行程序目录 /home/dmdrs/dmdrs5/bin
配置文件路径 /home/dmdrs/dmdrs5/bin/exec.xml
服务脚本模板目录 /home/dmdrs/dmdrs5/bin/service_template
服务脚本目录 /home/dmdrs/dmdrs5/bin
console远程控制工具 /home/dmdrs/dmdrs5/bin/drcsl

2 设置DMDRS运行用户

  1. 设置源DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限。

  2. 设置目标DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限。

3 设置环境变量

在源DMDRS服务器的环境变量中添加MySQL C API驱动文件路径,目标DMDRS服务器的环境变量中添加DMDPI驱动文件路径。

  1. 打开.bash_profile配置文件。

    $ vi ~/.bash_profile
  2. 在.bash_profile配置文件末尾增加驱动路径。

    • 源DMDRS服务器环境变量中添加MySQL C API驱动路径。

      export LD_LIBRARY_PATH=<MySQL C API驱动路径>:$LD_LIBRARY_PATH
    • 目标DMDRS服务器环境变量中添加DMDPI驱动路径。

      export LD_LIBRARY_PATH=<DMDPI驱动路径>:$LD_LIBRARY_PATH
  3. 保存并退出vi编辑器,使环境变量生效。

    $ source ~/.bash_profile
  4. 查看环境变量是否设置成功。

    $ echo $LD_LIBRARY_PATH

4 开启源数据库的binlog日志

  1. 设置MySQL数据库配置文件“my.ini”或“my.cnf”中server-id参数,设置log_bin参数值为mysql-bin,binlog_format参数值为row。当应用场景包含LOB数据的同步时,需要设置max_allowed_packet参数。

    [mysqld] server-id=1 log_bin=mysql-bin binlog_format=row max_allowed_packet=100M
  2. 重启数据库服务,使配置生效。

  3. 查看数据库log_bin参数和binlog_format参数设置是否已生效。

    SQL> show variables like 'log_bin'; SQL> show variables like 'binlog_format';

5 创建数据库同步用户和配置用户权限

请根据创建数据库同步用户DMDRS配置数据库同步用户最小权限创建源数据库和目标数据库的同步用户,并为数据库同步用户配置最小权限。

6 配置和启动目标DMDRS服务

介绍目标DMDRS服务的配置和启动方法。按顺序先启动目标DMDRS服务,再启动源DMDRS服务。

说明

以下DMDRS服务的配置文件仅为示例,在实际应用场景中,请根据实际搭建环境修改配置文件中的参数配置,具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》

  1. 在目标DMDRS服务的配置文件目录,打开并修改exec.xml配置文件,修改后配置文件如下所示。

    注意

    配置文件中的siteid为必配参数,配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性,如果重复,会造成链路中数据复制的混乱。

    <?xml version="1.0" encoding="GB18030"?> <drs> <base> <mgr_port>5345</mgr_port> <siteid>站点号</siteid> </base> <exec> <name>exec_dm8</name> <login> <dbtype>dm8</dbtype> <server>192.168.20.21</server> <user>DMDRS</user> <pwd>DMDRS</pwd> <port>5236</port> </login> <toggle_case>2</toggle_case> </exec> </drs>
  2. 将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本模板的名称为DrsService。

    $ cp TemplateService ../DrsService
  3. 打开并修改DrsService服务脚本中的相关配置参数。

    $ vi DrsService
    INSTALL_HOME=/home/dmdrs/dmdrs5 PROG_DIR=/home/dmdrs/dmdrs5/bin CONF_PATH=/home/dmdrs/dmdrs5/bin/exec.xml EXEC_PROG_NAME=drsvr SERVICE_TYPE_NAME="drs server"
  4. 启动目标DMDRS服务。

    $ ./DrsService start

7 配置和启动源DMDRS服务

介绍源DMDRS服务的配置和启动方法。按顺序先启动目标DMDRS服务,再启动源DMDRS服务。

说明
  • 当源数据库为MySQL时,启动DMDRS服务前,需要检查MySQL数据库相关的环境,具体请参见数据库环境检查章节。
  • 以下DMDRS服务的配置文件仅为示例,在实际应用场景中,请根据实际搭建环境修改配置文件中的参数配置,具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》
  1. 在源DMDRS服务的配置文件目录,打开并修改cpt.xml配置文件,修改后配置文件如下所示。

    注意

    配置文件中的siteid为必配参数,配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性,如果重复,会造成链路中数据复制的混乱。

    说明

    源DMDRS远程读取源数据库的归档日志,需要配置cpt_mask参数值为NET_READ。

    <?xml version="1.0" encoding="GB18030"?> <drs> <base> <mgr_port>5345</mgr_port> <siteid>站点号</siteid> </base> <cpt> <name>cpt_mysql</name> <login> <dbtype>mysql</dbtype> <server>192.168.20.22</server> <dbname>RESOURCES</dbname> <user>DMDRS</user> <pwd>DMDRS</pwd> <port>3306</port> </login> <send> <ip>192.168.20.21</ip> <port>5345</port> <target_name>exec_dm8</target_name> <map> <item>RESOURCES.*==RESOURCES.*</item> </map> </send> <cpt_mask>NET_READ</cpt_mask> </cpt> </drs>
  2. 将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本模板的名称为DrsService。

    $ cp TemplateService ../DrsService
  3. 打开并修改DrsService服务脚本中的相关配置参数。

    $ vi DrsService
    INSTALL_HOME=/home/dmdrs/dmdrs5 PROG_DIR=/home/dmdrs/dmdrs5/bin CONF_PATH=/home/dmdrs/dmdrs5/bin/cpt.xml EXEC_PROG_NAME=drsvr SERVICE_TYPE_NAME="drs server"
  4. 启动源DMDRS服务。

    $ ./DrsService start
    
  5. 启动控制台。

    $ ./drcsl cpt.xml
  6. 连接源DMDRS服务。

    CSL> connect
  7. 设置数据库当前最新的日志LSN作为日志解析的起始位置。如需指定归档文件作为起始位置,请参考《DMDRS控制台命令手册》进行设置。

    CSL> alter cpt_mysql set lsn
  8. 启动源DMDRS服务中的CPT模块。

    CSL> start

8 添加同步表

  1. 将源数据库中RESOURCES模式下所有的表添加同步,并在同步之前把源端表的全量数据装载到目标数据库。

    CSL> alter cpt_mysql add table "sch.name='RESOURCES'"
  2. 使用命令查看数据装载的监控信息,具体命令请参见《DMDRS控制台命令手册》

9 验证同步结果

在源数据库RESOURCES模式下所有的表中分别插入数据,如果插入的数据能正确地同步到目标数据库,则表示数据同步成功。

评论
后发表回复

作者

文章

阅读量

获赞

扫一扫
联系客服