数据迁移

以示例的形式介绍数据迁移场景中DMDRS的搭建流程。

1 场景规划

业务规划

数据迁移场景中已部署两个数据库，包括源数据库SQL Server（192.168.20.24）和目标数据库DM8（192.168.20.21），现需通过搭建DMDRS，将源数据库RESOURCES模式下表EMPLOYEE的全量数据迁移到目标数据库的RESOURCES模式。

• 源DMDRS：捕获源数据库的数据，将捕获到的数据发送到目标DMDRS。

• 目标DMDRS：将接收的数据复制到目标数据库。

网络规划

目录规划

源数据库、源DMDRS服务和目标DMDRS服务相关的目录规划如下表所示。

2 设置DMDRS运行用户

1. 设置源DMDRS服务的运行用户的管理员权限。

2. 设置目标DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限。

3 设置环境变量

在源DMDRS服务器的环境变量中添加ODBC驱动文件路径

1. 在Windows桌面或“开始”菜单，右键单击“此电脑”，选择“属性”。

2. 在打开的“设置”窗口中，选择“高级系统设置”。

3. 在弹出的“系统属性”对话框的“高级”选项卡中，选择“环境变量”。

4. 在“环境变量”对话框中，选择“系统变量”中系统变量“Path”，再选择“系统变量”下的“编辑”。

5. 在“编辑环境变量”表格中，填写“ODBC驱动路径”。

6. 重启服务器使环境变量配置生效。

在目标DMDRS服务器的环境变量中添加DMDPI驱动文件路径

1. 打开.bash_profile配置文件。

   $ vi ~/.bash_profile
   

2. 在.bash_profile配置文件末尾增加DMDPI驱动路径。

   export LD_LIBRARY_PATH=<DMDPI驱动路径>:$LD_LIBRARY_PATH
   

3. 保存并退出vi编辑器，使环境变量生效。

   $ source ~/.bash_profile
   

4. 查看环境变量是否设置成功。

   $ echo $LD_LIBRARY_PATH
   

4 创建查询LSN辅助表

注意

• 创建LSN辅助表时，请使用具有DBA权限的用户。
• 如果LSN辅助表无效或缺失，会导致数据迁移失败，甚至会影响数据库。

在源数据库执行“ddl_sql_mss_table.sql”脚本创建数据迁移所需的LSN辅助表，脚本默认位置在DMDRS执行程序目录下的scripts子目录中。

SQL> r ddl_sql_mss_table.sql

5 配置DMDRS服务

介绍源DMDRS服务和目标DMDRS服务的配置方法。

说明

以下DMDRS服务的配置文件仅为示例，在实际应用场景中，请根据实际搭建环境修改配置文件中的参数配置，具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》。

5.1 配置目标DMDRS服务

在目标DMDRS服务的配置文件目录，打开并修改exec.xml配置文件，修改后配置文件如下所示。

注意

配置文件中的siteid为必配参数，配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性，如果重复，会造成链路中数据复制的混乱。

<?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>站点号</siteid>
    </base>
    <exec>
        <name>exec_dm8</name>
        <login>
            <dbtype>dm8</dbtype>
            <server>192.168.20.21</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
            <port>5236</port>
        </login>
    </exec>
</drs>

5.2 配置源DMDRS服务

在源DMDRS服务的配置文件目录，打开并修改cpt.xml配置文件，修改后配置文件如下所示。

注意

配置文件中的siteid为必配参数，配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性，如果重复，会造成链路中数据复制的混乱。

<?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>站点号</siteid>
    </base>
    <cpt>
        <name>cpt_mss</name>
        <login>
            <dbtype>SQL Server</dbtype>
            <server>192.168.20.24,1433</server>
            <dbname>DMDRS</dbname>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
        </login>
        <send>
            <ip>192.168.20.21</ip>
            <port>5345</port>
            <target_name>exec_dm8</target_name>
            <map>
                <item>RESOURCES.EMPLOYEE==RESOURCES.EMPLOYEE</item>
            </map>
        </send>
    </cpt>
</drs>

6 运行DMDRS服务

按照服务的运行顺序，启动目标DMDRS服务和源DMDRS服务。

6.1 启动目标DMDRS服务

1. 将服务脚本模板TemplateService拷贝到服务脚本目录，并修改服务脚本模板的名称为DrsService。

   $ cp TemplateService ../DrsService
   

2. 打开并修改DrsService服务脚本中的相关配置参数。

   $ vi DrsService
   

   INSTALL_HOME=/home/dmdrs/dmdrs5
   PROG_DIR=/home/dmdrs/dmdrs5/bin
   CONF_PATH=/home/dmdrs/dmdrs5/bin/exec.xml
   EXEC_PROG_NAME=drsvr
   SERVICE_TYPE_NAME="drs server"
   

3. 启动目标DMDRS服务。

   $ ./DrsService start
   

6.2 启动源DMDRS服务

1. 将注册、启动、停止和卸载服务脚本模板拷贝到服务脚本目录。

   • 注册服务脚本：DrsServiceInstall.bat

   • 启动服务脚本：DrsServiceStart.bat

   • 停止服务脚本：DrsServiceStop.bat

   • 卸载服务脚本：DrsServiceUninstall.bat

2. 在服务脚本目录运行注册服务脚本DrsServiceInstall.bat注册源DMDRS服务。

3. 在服务脚本目录运行启动服务脚本DrsServiceStart.bat启动源DMDRS服务。

6.3 在源DMDRS服务中执行数据迁移命令

使用服务脚本启动服务后，需要使用远程控制台对服务中的CPT模块执行数据迁移命令。

说明

数据迁移功能无需启动CPT模块，直接执行相应的数据迁移命令即可，具体命令请参见《DMDRS控制台命令手册》。

1. 启动控制台。

   C:\dmdrs5\bin>.\drcsl cpt.xml
   

2. 连接源DMDRS服务。

   CSL> connect
   

3. 将源数据库RESOURCES模式下表EMPLOYEE的全量数据迁移到目标数据库。

   根据不同需求可以使用不同的数据迁移掩码，掩码说明具体请参见《DMDRS控制台命令手册》的数据迁移章节。

   CSL> alter cpt_mss cp "sch.name='RESOURCES' and tab.name='EMPLOYEE'"
   

4. 使用命令查看数据迁移的监控信息，具体命令请参见《DMDRS控制台命令手册》。

7 验证迁移结果

验证源数据库中表RESOURCES.EMPLOYEE的数据是否已成功迁移到目标数据库。