Canal扩展篇(阿里开源项目的功能介绍:用于实现数据同步备份及实时监控表及其字段信息(如日志记录))
发布时间
阅读量:
阅读量
1.Canal功能与应用概述
Canal伪装数据库获取Binlog日志
https://github.com/alibaba/canal
Canal 的核心功能在于解析 MySQL 数据库的增量日志,从而实现对增量数据的订阅与消费,其运行机制如下:
Canal 通过模拟 MySQL 从节点的交互协议,将自身伪装成 MySQL 的 slave 节点,并向 MySQL 主节点发送 dump 协议请求
MySQL 主节点在接收到 dump 请求后,会开始将 binary log 数据推送给 slave 节点(即 Canal)
Canal 对接收到的 binary log 对象进行解析(原始数据以 byte 流形式存在)
该技术可应用于以下业务场景:
数据库镜像构建
数据库的实时备份操作
索引结构的建立与动态维护(包括异构索引拆分、倒排索引等)
业务缓存的数据更新操作
具备业务逻辑处理能力的增量数据加工过程
目前 Canal 支持作为源端数据库的 MySQL 版本涵盖 5.1.x、5.5.x、5.6.x、5.7.x 以及 8.0.x 等多个版本。
2.核心原理解析

还没有任何评论哟~
