canal 是阿里巴巴开源的一款基于数据库增量日志解析,提供增量数据订阅&消费,目前主要支持了MySQL(也支持mariaDB)。

我开发的这个CanalSync项目 https://github.com/yuzd/CanalSync   ==>觉得不错帮忙给个star谢谢

是基于canal-server之上的数据库同步&消费中间件，

用于可快速搭建消费canal-server的项目。 目前我已实现并开源了如下：

1. 数据消费传输到redis组件

2. 数据消费传输到rabbitmq组件

3. 数据消费传输到mysql数据库组件

Nuget：

1. 接收canal-server的消息中间件：

Install-Package Canal.Server

2. 解析canal-server消息转出可执行sql的中间件：

Install-Package Canal.SqlParse

如何使用

如果你需要写一个数据消费传输到XXXMQ，用不到反解析成sql的话，只需要引用 Canal.Server中间件。 如果你需要写一个数据消费传输到XXXdb，得用到反解析sql中间件，需要同时引用Canal.Server 和 Canal.SqlParse 这2个中间件。

Canal.Server 如何使用

1. 引用 Canal.Server 并appsettings.json 配置canal-server的参数.如下图：

参数说明： 

2. 创建一个 消费类 必须要 实现： INotificationHandler 接口，例如叫TestHandler

3. 在startUp 使用并注册 该消费类

      
      services.AddCanalService(produce => produce.RegisterSingleton<TestHandler>());

Canal.SqlParse 如何使用

目前只实现了解析mysql的逻辑，未来会加入sqlserver的解析逻辑!!

            services.AddMysqlParseService(connectionString);

在类的构造方法可注入：

如上图，代表将canal-server的数据直接在另外的mysql库里面执行，等于2个mysql数据进行互相同步。

欧洲与中国的2个mysql库 使用上述方法进行同步的测试

结果： 同步速度在100~200qps 

原文地址：https://www.cnblogs.com/yudongdong/p/11032062.html

.NET社区新闻，深度好文，欢迎访问公众号文章汇总 http://www.csharpkit.com