注册
达梦数据复制软件DMDRS同步环境准备指南:以PostgreSQL为源数据库
专栏/数+融合专栏/ 文章详情 /

达梦数据复制软件DMDRS同步环境准备指南:以PostgreSQL为源数据库

达梦数+数据融合软件(DMDF)产品团队 2026/07/28 132 0 0
摘要 以源数据库PostgreSQL为例,介绍搭建DMDRS同步环境时,数据库和DMDRS的准备工作。

1 数据库准备工作

在运行DMDRS服务前,数据库管理员需要对数据库做如下准备工作。

配置服务 准备工作
源DMDRS
  • 除数据迁移场景外,其他应用场景均需要开启源数据库的归档。
  • 除数据迁移场景外,其他应用场景均需要配置DDL同步。
  • 创建源数据库同步用户DMDRS。
  • 配置源数据库同步用户最小权限。
目标DMDRS
  • 创建目标数据库同步用户DMDRS。
  • 配置目标数据库同步用户最小权限。

1.1 开启源数据库的归档

为了保证源DMDRS服务运行中数据的一致性,源DMDRS服务需要读源数据库的归档,因此源数据库需要开启归档。数据库管理员可按静态配置方式进行配置。

注意

源数据库未开启归档或者归档参数配置不正确,将无法进行同步。

  1. 设置PostgreSQL数据库配置文件“postgresql.conf”中如下归档参数。

    • wal_level设置为logical。

    • archive_mode设置为on。

    • archive_command设置归档命令,命令格式示例如下:

      'cp %p /postgres/data/arch/%f' # /postgres/data/arch为归档文件路径,由用户指定 # %p = 归档文件路径 # %f = 归档文件名
  2. 重启数据库服务,使配置生效。

  3. 查看wal_level、archive_mode和archive_command参数配置是否生效。

    • 查看wal_level参数配置是否生效。

      SQL> select current_setting('wal_level'); current_setting ----------------- logical (1 行记录)

      查看结果为logical表示wal_level参数配置已生效。

    • 查看archive_mode参数配置是否生效。

      SQL> select current_setting('archive_mode'); current_setting ----------------- on (1 行记录)

      查看结果为on表示archive_mode参数配置已生效。

    • 查看archive_command参数配置是否生效。

      SQL> select current_setting('archive_command'); current_setting ----------------------------- cp %p /postgres/data/arch/%f (1 行记录)

      查看结果为配置的值表示archive_command参数已生效。

1.2 配置DDL同步

DMDRS服务支持DDL同步功能。当应用场景中需要DDL同步时,数据库管理员可使用触发器方式进行配置。

注意
  • 创建DDL触发器和辅助表时,请使用具有DBA权限的用户。
  • 如果触发器或辅助表无效或缺失,会导致DDL同步失败,甚至会影响数据库。
  • PostgreSQL 9.6版本使用“ddl_sql_pg96.sql”脚本创建触发器和辅助表,PostgreSQL 10/11版本使用“ddl_sql_pg.sql”脚本创建触发器和辅助表,PostgreSQL 12/13版本使用“ddl_sql_pg12.sql”脚本创建触发器和辅助表。

以PostgreSQL 11版本为例,介绍使用触发器方式配置DDL同步的方法。

  1. 在源数据库执行“ddl_sql_pg.sql”脚本创建触发器和辅助表,脚本默认位置在DMDRS执行程序目录下的scripts子目录中。

    SQL> \i ddl_sql_pg.sql
  2. 检查创建的触发器和辅助表是否有效。

    • 检查创建的触发器:

      SQL> select p.proname, l.lanname, n.nspname from pg_proc p join pg_language l on p.prolang = l.oid join pg_namespace n on p.pronamespace = n.oid where p.proname like 'drs_$%' and n.nspname = 'public';

      查询结果如下:

      proname | lanname | nspname -----------------------+---------+--------- drs_$ddl_trigger_ca | plpgsql | public drs_$ddl_trigger_drop | plpgsql | public (2 行记录)

      如果存在以上查询结果,表示DMDRS触发器创建有效。

    • 检查创建的辅助表:

      SQL> select table_name, table_schema from information_schema.tables where table_schema = 'public' and table_name like 'DRS_$DDL%';

      查询结果如下:

      table_name | table_schema ---------------+-------------- DRS_$DDL_COL | public DRS_$DDL_CONS | public DRS_$DDL_IDX | public DRS_$DDL_LOG | public DRS_$DDL_SQL | public (5 行记录)

      如果存在以上查询结果,表示DMDRS辅助表创建成功。

1.3 创建数据库同步用户DMDRS

请源数据库管理员和目标数据库管理员分别创建数据库同步用户DMDRS,并赋予同步所需权限。建议源数据库DMDRS用户不赋予DBA权限,赋予同步所需的最小权限即可,建议目标数据库DMDRS用户赋予DBA权限,如果不能赋予DBA权限,为确保同步的正确性,需赋予DMDRS用户同步所需的最小权限,最小权限配置具体请参见3.4 配置数据库同步用户最小权限章节。

说明
  • 如果数据库管理员已赋予DMDRS同步用户DBA权限,则不需要配置数据库同步用户最小权限。
  • 数据库同步用户DMDRS创建完成后,如果需要在用户下进行DDL和DML操作,需要数据库管理员赋予相应的操作权限。

1.4 配置数据库同步用户最小权限

DMDRS服务运行过程中,使用的数据库同步用户需要一定的权限访问数据库数据,如果不能赋予DMDRS同步用户DBA权限,为确保同步的正确性,数据库管理员可根据应用场景配置数据库同步用户的最小权限。

1.4.1 源数据库同步用户最小权限

赋予PostgreSQL源数据库同步用户最小权限的脚本示例请参见 8.2.1 PostgreSQL源数据库同步用户最小权限脚本示例,具体的权限说明如下表所示。

权限类别 权限说明 权限
基础权限 源DMDRS在启动、数据装载及同步过程中需要使用数据库数据字典表来查询如日志信息、数据库实例名和表定义等相关信息。 需要赋予如下权限:
SELECT ON ALL TABLES IN SCHEMA pg_catalog
源DMDRS在启动时,需要检查数据库配置参数来确认是否开启归档模式和获取归档路径信息等。 需要赋予如下权限:
pg_read_all_settings
修改辅助表的属主 需要赋予如下权限:
ALTER TABLE public."DRS_$DDL_PART" OWNER
ALTER TABLE public."DRS_$DDL_LOG" OWNER
ALTER TABLE public."DRS_$DDL_IDX" OWNER
ALTER TABLE public."DRS_$DDL_CONS" OWNER
ALTER TABLE public."DRS_$DDL_SQL" OWNER
ALTER TABLE public."DRS_$DDL_SEQ" OWNER
ALTER TABLE public."DRS_$DDL_COL" OWNER
装载相关权限 装载时,数据库用户需要具有装载表的查询权限。
如果待装载的表或序列在当前用户下,不需要额外赋予任何查询权限。
如果待装载的表或序列在其他用户下,则需要赋予待装载表的查询权限。
需要赋予如下权限:
SELECT ON <待装载表/序列的模式名>.<待装载表/序列的表名>

1.4.2 目标数据库同步用户最小权限

PostgreSQL目标数据库同步用户最小权限

赋予PostgreSQL目标数据库同步用户最小权限的脚本示例请参见 8.2.2 PostgreSQL目标数据库同步用户最小权限脚本示例,具体的权限说明如下表所示。

权限类别 权限说明 权限
基础权限 启动时需要在dbname参数指定的目标库下创建辅助表和辅助存储过程。 需要赋予如下权限:
CREATE ON DATABASE <目标库名>
连接数据库时需要创建会话(用户创建时默认授予)。 需要赋予如下权限:
CONNECT ON DATABASE <目标库名>
装载与同步相关权限 需要public模式下辅助表的操作权限。 需要赋予如下权限:
USAGE ON SCHEMA public
INSERT|UPDATE|DELETE|SELECT ON ALL TABLES IN SCHEMA public
需要目标数据库中已存在的待同步表上的操作和查询权限。 需要赋予如下权限:
USAGE ON SCHEMA <目标表的模式名>
INSERT|UPDATE|DELETE|SELECT ON <目标表的模式名>.<目标表名>
需要目标数据库中未存在的待同步表上的操作和查询权限。也可以在目标同步表创建后,同上行所述单独为每张表赋予操作和查询权限。 需要赋予如下权限:
USAGE ON SCHEMA <目标表的模式名>
INSERT|UPDATE|DELETE|SELECT ON ALL TABLES IN SCHEMA <目标表的模式名>
需要非同步用户模式下未存在的表/序列的数据的操作权限。也可以在目标同步表创建后,同上行所述单独为每张表赋予操作权限。 需要赋予如下权限:
USAGE ON SCHEMA <目标表的模式名>
INSERT|UPDATE|DELETE|SELECT ON ALL TABLES IN SCHEMA <目标表的模式名>
需要目标数据库中待同步对象的DDL权限。 需要赋予如下权限:
CREATE ON SCHEMA <目标模式名>

DM8目标数据库同步用户最小权限

赋予DM8目标数据库同步用户最小权限的脚本示例请参见 8.2.3 DM8目标数据库同步用户最小权限脚本示例,具体的权限说明如下表所示。

权限类别 权限说明 权限
基础权限 目标DMDRS在执行DML时需要数据操作权限。 需要赋予如下权限:
PUBLIC
目标DMDRS在启动时需要在目标数据库中创建辅助表和辅助存储过程。 需要赋予如下权限:
RESOURCE
目标DMDRS在启动时需要查询数据库的相关参数信息、系统表字典信息。 需要赋予如下权限:
SOI、VTI
目标DMDRS在启动时需要同步用户有创建会话的权限。 需要赋予如下权限:
CREATE SESSION
装载与同步相关权限 若需要同步在非同步用户模式下已存在的表/序列的数据,需要赋予在待同步表/序列上的DML权限或查询权限。 需要赋予如下权限:
INSERT|UPDATE|DELETE ON <目标表的模式名>.<目标表名>
SELECT ON <目标序列的模式名>.<目标序列名>
若需要同步在非同步用户模式下未存在的表/序列的数据,可以先在装载时使用CREATE掩码同步创建表/序列DDL语句,然后赋予该表/序列的DML权限或查询权限。也可为同步用户赋予在所有表/序列上的DML权限或查询权限。 需要赋予如下权限:
INSERT|UPDATE|DELETE|SELECT ANY TABLE
SELECT ANY SEQUENCE
若需要同步在非同步用户模式下表的注释,需要赋予创建表注释的权限。 需要赋予如下权限:
COMMENT ANY TABLE
若需要同步在非同步用户模式下的对象的DDL语句,需要赋予相应的DDL权限。
注:装载表时需要赋予TABLE和INDEX的权限。授予ANY权限前,需先执行语句“ALTER SYSTEM SET 'ENABLE_DDL_ANY_PRIV'=1 BOTH;”开启ANY的授权权限。
需要赋予如下权限:
CREATE|ALTER|DROP ANY <对象类型>
若需要非模式对象(表空间、用户、角色和公共同义词)的DDL操作权限,需要赋予同步用户相应的DDL权限。其中角色和公共同义词不需要ALTER权限。 需要赋予如下权限:
CREATE|ALTER|DROP <对象类型>
若需要同步在非同步用户模式下的非表对象的DDL语句或源DMDRS的DDL_MASK配置SQL掩码情况下同步对象的DDL语句,需要赋予同步用户辅助存储过程的执行权限以及非同步用户下模式所属用户的存储过程的创建权限。 需要赋予如下权限:
EXECUTE ON PROCEDURE "DRS_$DDL_SQL_PROC"
CREATE PROCEDURE TO <非同步用户下模式所属的用户>

2 DMDRS准备工作

在配置和运行DMDRS服务前,需要对DMDRS做如下准备工作。

2.1 DMDRS服务管理规划

在配置DMDRS服务前,需规划DMDRS服务的Manager模块的端口号,包括源DMDRS、目标DMDRS服务和DMDSS服务的Manager模块的端口号。

注意

不同的应用场景,DMDRS所包括的DMDRS服务不同。如果在同一台服务器上部署不同的服务,必须确保这些服务的Manager模块的端口号的唯一性。

2.2 设置运行用户权限

说明

DMDRS的运行用户与安装用户使用同一个用户dmdrs,安装用户请参见《DMDRS安装手册》

DMDRS运行用户需要以下权限:

  • Windows:运行用户具有管理员权限。

  • Linux系统:运行用户具有DMDRS服务所在目录及子目录的读、写和执行权限。源DMDRS的运行用户应同数据库归档文件目录属同一用户组,该用户组对归档文件所在目录及子目录有读权限。

2.3 设置环境变量

DMDRS服务运行过程中,需要使用数据库的驱动文件访问数据库数据。

  • 源DMDRS服务:需要使用ODBC驱动文件访问源数据库数据,用户需要在源DMDRS服务器的环境变量中添加ODBC驱动文件路径。

  • 目标DMDRS服务:需要使用目标数据库对应的驱动文件访问目标数据库数据,用户需要在目标DMDRS服务器的环境变量中添加各数据库对应的驱动文件路径。

不同数据库对应的驱动如下所示。

  • DM8单机数据库:DMDPI驱动

  • PostgreSQL数据库:ODBC驱动

说明
  • 设置环境变量前,请确保源DMDRS与目标DMDRS服务器上已安装数据库的驱动,且驱动版本与数据库版本相匹配。
  • 设置环境变量前,请向数据库管理员获取数据库驱动路径。
  • 由于操作系统、终端不同,设置环境变量命令或操作步骤会略有差异。

以设置PostgreSQL数据库的ODBC驱动的环境变量为例,介绍常用操作系统下设置环境变量的方法。

  • Linux系统

    在终端的配置文件中添加设置环境变量命令。

    export LD_LIBRARY_PATH=<ODBC驱动路径>:$LD_LIBRARY_PATH
  • Windows系统

    1. 在Windows桌面或“开始”菜单,右键单击“此电脑”,选择“属性”。

    2. 在打开的“设置”窗口中,选择“高级系统设置”。

    3. 在弹出的“系统属性”对话框的“高级”选项卡中,选择“环境变量”。

    4. 在“环境变量”对话框中,选择“系统变量”中系统变量“Path”,再选择“系统变量”下的“编辑”。

    5. 在“编辑环境变量”表格中,填写“ODBC驱动路径”。

评论
后发表回复

作者

文章

阅读量

获赞

扫一扫
联系客服