Canal是阿里巴巴开源的一款基于数据库增量日志解析，实现MySQL数据库数据增量订阅和消费的工具。它能够通过解析MySQL的binlog日志，获取数据库的增量变更数据，并将这些变更数据推送到目标系统（如消息队列、存储引擎等），实现数据的实时同步和数据流动。

 

关键特点包括：

 

1. 增量订阅: Canal能够订阅MySQL数据库的增量变更，包括插入、更新、删除操作等。

 

2. 低延迟: Canal可以实时地捕获数据库的变更，使得目标系统可以几乎实时地获取到数据库的变更数据。

 

3. 高可靠性: Canal提供了高可靠的数据订阅和传输机制，保证数据的完整性和一致性。

 

4. 多种目标系统支持: Canal支持将MySQL的增量数据同步到多种目标系统，如Kafka、RocketMQ、AliyunMQ等消息队列，或者直接存储到HDFS等存储引擎。

 

5. 数据过滤和转换: Canal支持对订阅的数据进行过滤和转换，可以按照需求选择性地获取和处理数据变更。

 

总体来说，Canal是一款用于实时数据库数据同步的工具，特别适用于需要实时监控和处理MySQL数据库变更的场景，如数据同步、数据备份、数据分析等。

 

# 大数据
GitHub 加速计划 / ca / canal
28.22 K
7.57 K
下载
alibaba/canal: Canal 是由阿里巴巴开源的分布式数据库同步系统，主要用于实现MySQL数据库的日志解析和实时增量数据订阅与消费，广泛应用于数据库变更消息的捕获、数据迁移、缓存更新等场景。
最近提交(Master分支：3 个月前 )
1e5b8a20 - 2 个月前
ff82fd65 2 个月前
Logo
GitCode 开源社区

旨在为数千万中国开发者提供一个无缝且高效的云端环境，以支持学习、使用和贡献开源项目。

更多推荐

[转载]在Windows环境下安装GNU Radio

转自：在Windows环境下安装GNURadio_恐弱智_新浪博客GNU Radio是用Python开发的，大部分开源的工程能够在Linux环境下运行良好，而Windows下却运行的很勉强，而且安装配置都很复杂。GNU Radio算是个例外了，不光提供了Windows的二进制安装，还有比较详细的说明。我是Python小白，所以折腾了好久才弄好，特意记录下来，免得以后再装还折腾。GNU Radio的

avatar GitCode 开源社区

centOS 8 使用dnf安装Docker

DNF是什么？CentOS 8使用YUM软件包管理器版本v4.0.4。现在，该版本使用DNF(已删除YUM)。DNF是软件包管理器。它会在Linux发行版上安装，执行更新并删除软件包。使用DNF安装Docker跳过具有损坏依赖性的程序包一个有效的解决方案是使您的CentOS 8系统使用以下--nobest命令安装最符合条件的版本：sudo dnf install docker...

avatar GitCode 开源社区

定时同步数据库表(mysql+linux+crontab)

sync.sh里面的参数需要改变，ip/username/password/database/tablesync.sh#!/bin/sh# Please change the IP and password of the data source db.# Then change the table name.filename=/home/nington/db/$(date +%Y-%m

avatar GitCode 开源社区