FlinkCDC中的DataStream与FlinkSQL对比、FlinkCDC与Maxwell与Canal对比
canal
alibaba/canal: Canal 是由阿里巴巴开源的分布式数据库同步系统,主要用于实现MySQL数据库的日志解析和实时增量数据订阅与消费,广泛应用于数据库变更消息的捕获、数据迁移、缓存更新等场景。
项目地址:https://gitcode.com/gh_mirrors/ca/canal
免费下载资源
·
DataStream:
- 优点:多库多表
- 缺点:需要自定义反序列化器(灵活)
FlinkSQL:
- 优点:不需要自定义反序列化器
- 缺点:单表查询
FlinkCDC | Maxwell | Canal | |
---|---|---|---|
SQL与数据条数关系 | SQL影响几条出现几条 | SQL影响几条出现几条 | 只有一整条(后续可能需要炸开) |
数据初始化功能 | 有(支持多库多表同时做) | 有(单表) | 无 |
断点续传功能 | 有(放在CK) | 有(存在MySQL) | 有(本地) |
封装格式 | 自定义 | JSON | JSON(c/s可以自定义) |
高可用 | 运行集群是高可用 | 无 | 集群(加ZK信息) |
GitHub 加速计划 / ca / canal
28.22 K
7.57 K
下载
alibaba/canal: Canal 是由阿里巴巴开源的分布式数据库同步系统,主要用于实现MySQL数据库的日志解析和实时增量数据订阅与消费,广泛应用于数据库变更消息的捕获、数据迁移、缓存更新等场景。
最近提交(Master分支:3 个月前 )
1e5b8a20 - 2 个月前
ff82fd65
2 个月前
更多推荐
已为社区贡献1条内容
所有评论(0)