合 阿里数据同步工具Otter和Canal简介
Tags: MySQL高可用双主主从复制数据同步Otter跨机房阿里Canal
通道配置说明
多种同步方式配置
a. 单向同步
单向同步为最基本的同步方式,目前支持mysql -> mysql/oracle的同步.
基本配置方式就如操作视频中所演示的,操作步骤:
- 配置一个channel
- 配置一个pipeline
对应node机器选择时,建议遵循:S/E节点选择node需尽可能离源数据库近,T/L节点选择node则离目标数据库近. 如果无法提供双节点,则选择离目标数据库近的node节点相对合适. - 配置一个canal
- 定义映射关系.
canal中配置解析的数据库ip需要和映射关系中源表对应的数据库ip一致. ps. 映射关系进行匹配的时候是基于表名,虽然数据库ip不匹配也会是有效.
b. 双向同步
双向同步可以理解为两个单向同步的组合,但需要额外处理避免回环同步. 回环同步算法: Otter双向回环控制 .
同时,因为双向回环控制算法会依赖一些系统表,需要在需要做双向同步的数据库上初始化所需的系统表.
获取初始sql:
1 | wget https://raw.github.com/alibaba/otter/master/node/deployer/src/main/resources/sql/otter-system-ddl-mysql.sql |
配置上相比于单向同步有一些不同,操作步骤: