DM8 Flink CDC 连接器是在 Flink 框架的基础上对 DM8 数据进行实时采集。底层使用 DM 提供的 DBMS_LOGMNR 包对归档日志进行挖掘,采用已有的解析工具对 SQL 进行解析,重构出 DDL 和 DML 操作,将结构化的数据下发给下游消费。
DM8 Flink CDC 连接器已适配 Flink SQL,可以通过使用纯 SQL 的方式来开发和运行一个 Flink 数据同步任务,用户也可以通过编写代码的方式将 Table-api 转为 Stream-api,并对流式数据消息进行自定义处理。
工具的具体配置与说明请参考用户手册。
Jdk 版本:1.8.0
Flink 版本:1.17.0
Flink CDC 版本:2.4.1
Dm8 版本:dm8 版本号不能小于 8.1.3.77
详细内容见 flink-cdc-dm2.4.1.241128
文章
阅读量
获赞