
Hadoop技术栈
文章平均质量分 66
Hadoop技术栈相关内容
三千烦恼丝xzh
Java、大数据、SQL开发方向欢迎探讨
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Flink CDC 实现Postgres变更捕获
记录快速接入 postgres cdc工具选型Postgres 10+flink 1.13.3 , flink-connector-postgres-cdc 2.2-SNAPSHOTFlink-CDC文档flink-connector GithubGithub官网的README记录是支持9.6的,不过使用Postgres 9.6的docker容器测试时部分SQL语法报错了,猜测是flink-connector-postgres-cdc依赖过高的问题,Postgres 9.6可以降低至2.0.原创 2022-01-11 13:32:57 · 2567 阅读 · 0 评论 -
flink-cdc 实现MySQL变更捕获
着重点在本地调试flink-cdc踩坑工具选型MySQL 5.7.31flink 1.13.3 , flink-connector-mysql-cdc 2.2-SNAPSHOTFlink-CDC文档选择flink-cdc的原因是为简化cdc过程中依赖的工具链,flink-cdc通过复用debezium的connect和kafka-connect实现直连flink,再者可通过flink平台适配的各种source sink和SQL client 轻松实现数据源同步。参考过程本地调试也需要f.原创 2021-12-28 15:44:06 · 4493 阅读 · 2 评论 -
Debezium实现MongoDB变更捕获推 Kafka
重点记录debezium connect的使用。原创 2021-12-22 11:22:22 · 2142 阅读 · 0 评论