注册
DM8 Flink CDC 连接器工具
专栏/技术分享/ 文章详情 /

DM8 Flink CDC 连接器工具

达梦数据技术支持 2024/11/29 4184 28 54
摘要

功能描述

  DM8 Flink CDC 连接器是在 Flink 框架的基础上对 DM8 数据进行实时采集。底层使用 DM 提供的 DBMS_LOGMNR 包对归档日志进行挖掘,采用已有的解析工具对 SQL 进行解析,重构出 DDL 和 DML 操作,将结构化的数据下发给下游消费。
  DM8 Flink CDC 连接器已适配 Flink SQL,可以通过使用纯 SQL 的方式来开发和运行一个 Flink 数据同步任务,用户也可以通过编写代码的方式将 Table-api 转为 Stream-api,并对流式数据消息进行自定义处理。
  工具的具体配置与说明请参考用户手册。

环境要求

Jdk 版本:1.8.0
Flink 版本:1.17.0
Flink CDC 版本:2.4.1
Dm8 版本:dm8 版本号不能小于 8.1.3.77

下载地址

详细内容见 flink-cdc-dm2.4.1.241128

评论
后发表回复

作者

文章

阅读量

获赞

扫一扫
联系客服