1 场景规划

业务规划

数据同步场景中已部署两个数据库，包括源数据库Kingbase V6（192.168.20.24）和目标数据库DM8（192.168.20.21），现需通过搭建DMDRS，将源数据库RESOURCES模式下所有表的全量数据和增量数据同步到目标数据库的RESOURCES模式。

• 源DMDRS：捕获源数据库的数据，将捕获到的数据发送到目标DMDRS。

• 目标DMDRS：将接收的数据同步到目标数据库。

网络规划

目录规划

源数据库、源DMDRS服务和目标DMDRS服务相关的目录规划如下表所示。

2 设置DMDRS运行用户

1. 设置源DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限，并设置运行用户同数据库归档文件所在目录属同一用户组，此用户组应对归档文件所在目录及子目录有读权限。

2. 设置目标DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限。

3 设置环境变量

在源DMDRS服务器的环境变量中添加ODBC驱动文件路径，在目标DMDRS的服务器的环境变量中添加DMDPI驱动文件路径。

1. 打开.bash_profile配置文件。

   $ vi ~/.bash_profile
   

2. 在.bash_profile配置文件末尾增加驱动路径。

   • 源DMDRS服务器环境变量中添加ODBC驱动路径。

     export LD_LIBRARY_PATH=<ODBC驱动路径>:$LD_LIBRARY_PATH
     

   • 目标DMDRS服务器环境变量中添加DMDPI驱动路径。

     export LD_LIBRARY_PATH=<DMDPI驱动路径>:$LD_LIBRARY_PATH
     

3. 保存并退出vi编辑器，使环境变量生效。

   $ source ~/.bash_profile
   

4. 查看环境变量是否设置成功。

   $ echo $LD_LIBRARY_PATH
   

4 开启源数据库的归档

以静态配置的方式开启源数据库的归档。

注意

源数据库未开启归档或者归档参数配置不正确，将无法进行同步。

1. 设置Kingbase V6数据库配置文件“kingbase.conf”中如下归档参数。

   • enable_llogminer设置为on。

   • log_archive_start设置为on。

   • log_archive_dest设置归档路径，如'/kingbaseV6/data/arch'。

2. 重启数据库服务，执行SQL，查看重启后配置文件是否生效。

   SQL> SELECT sys_reload_conf();
    sys_reload_conf
   -----------------
    true
   (1 行记录)
   

3. 查看enable_llogminer、log_archive_start和log_archive_dest参数配置是否生效。

   • 查看enable_llogminer参数配置是否生效。

     SQL> select current_setting('enable_llogminer');
     CURRENT_SETTING
     -----------------
     on
     (1 行)
     

     查看结果为on表示enable_llogminer参数配置已生效。

   • 查看log_archive_start参数配置是否生效。

     SQL> select current_setting('log_archive_start');
     CURRENT_SETTING
     -----------------
     on
     (1 行)
     

     查看结果为on表示log_archive_start参数配置已生效。

   • 查看log_archive_dest参数配置是否生效。

     SQL> select current_setting('log_archive_dest');
     CURRENT_SETTING
     -------------------------
     /kingbaseV6/data/arch
     (1 行)
     

     查看结果为配置的值表示log_archive_dest参数已生效。

5 配置和启动目标DMDRS服务

介绍目标DMDRS服务的配置和启动方法。按顺序先启动目标DMDRS服务，再启动源DMDRS服务。

说明

以下DMDRS服务的配置文件仅为示例，在实际应用场景中，请根据实际搭建环境修改配置文件中的参数配置，具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》。

1. 在目标DMDRS服务的配置文件目录，打开并修改exec.xml配置文件，修改后配置文件如下所示。

   注意

   配置文件中的siteid为必配参数，配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性，如果重复，会造成链路中数据复制的混乱。

   <?xml version="1.0" encoding="GB18030"?>
   <drs>
       <base>
           <mgr_port>5345</mgr_port>
           <siteid>站点号</siteid>
       </base>
       <exec>
           <name>exec_dm8</name>
           <login>
               <dbtype>dm8</dbtype>
               <server>192.168.20.21</server>
               <user>DMDRS</user>
               <pwd>DMDRS</pwd>
               <port>5236</port>
           </login>
       </exec>
   </drs>
   

2. 将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。

   $ cp TemplateService ../DrsService
   

3. 打开并修改DrsService服务脚本中的相关配置参数。

   $ vi DrsService
   

   INSTALL_HOME=/home/dmdrs/dmdrs5
   PROG_DIR=/home/dmdrs/dmdrs5/bin
   CONF_PATH=/home/dmdrs/dmdrs5/bin/exec.xml
   EXEC_PROG_NAME=drsvr
   SERVICE_TYPE_NAME="drs server"
   

4. 启动目标DMDRS服务。

   $ ./DrsService start
   

6 配置和启动源DMDRS服务

介绍源DMDRS服务的配置和启动方法。按顺序先启动目标DMDRS服务，再启动源DMDRS服务。

说明

以下DMDRS服务的配置文件仅为示例，在实际应用场景中，请根据实际搭建环境修改配置文件中的参数配置，具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》。

1. 在源DMDRS服务的配置文件目录，打开并修改cpt.xml配置文件，修改后配置文件如下所示。

   注意

   配置文件中的siteid为必配参数，配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性，如果重复，会造成链路中数据复制的混乱。

   <?xml version="1.0" encoding="GB18030"?>
   <drs>
       <base>
           <mgr_port>5345</mgr_port>
           <siteid>站点号</siteid>
       </base>
       <cpt>
           <name>cpt_kdb</name>
           <login>
               <dbtype>kdbv6</dbtype>
               <server>192.168.20.24</server>
               <dbname>test</dbname>
               <user>DMDRS</user>
               <pwd>DMDRS</pwd>
               <port>54321</port>
               <driver>KingbaseES 6 ODBC Driver</driver>
           </login>
           <send>
               <ip>192.168.20.21</ip>
               <port>5345</port>
               <target_name>exec_dm8</target_name>
               <map>
                   <item>RESOURCES.*==RESOURCES.*</item>
               </map>
           </send>
       </cpt>
   </drs>
   

2. 将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。

   $ cp TemplateService ../DrsService
   

3. 打开并修改DrsService服务脚本中的相关配置参数。

   $ vi DrsService
   

   INSTALL_HOME=/home/dmdrs/dmdrs5
   PROG_DIR=/home/dmdrs/dmdrs5/bin
   CONF_PATH=/home/dmdrs/dmdrs5/bin/cpt.xml
   EXEC_PROG_NAME=drsvr
   SERVICE_TYPE_NAME="drs server"
   

4. 启动源DMDRS服务。

   $ ./DrsService start
   

5. 启动控制台。

   $ ./drcsl cpt.xml
   

6. 连接源DMDRS服务。

   CSL> connect
   

7. 设置数据库当前最新的日志LSN作为日志解析的起始位置。如需指定归档文件作为起始位置，请参考《DMDRS控制台命令手册》进行设置。

   CSL> alter cpt_kdb set lsn
   

8. 启动源DMDRS服务中的CPT模块。

   CSL> start
   

7 添加同步表

1. 将源数据库中RESOURCES模式下所有的表添加同步，添加后将源数据库的全量数据装载到目标数据库，并将增量数据同步到目标数据库。

   CSL> alter cpt_kdb add table "sch.name='RESOURCES'" 
   

2. 使用命令查看数据装载的监控信息，具体命令请参见《DMDRS控制台命令手册》。

8 验证同步结果

在源数据库中RESOURCES模式下所有的表中分别插入数据，如果插入的数据能正确地同步到目标数据库，则表示数据同步成功。