看啥推荐读物
专栏名称: 分布式实验室
最专业的Docker文章,最权威的Docker新闻。关注容器生态圈的发展。
目录
相关文章推荐
今天看啥  ›  专栏  ›  分布式实验室

基于Docker结合Canal实现MySQL实时增量数据传输

分布式实验室  · 公众号  · 后端  · 2019-08-17 08:15
Canal的介绍Canal的历史由来在早期的时候,阿里巴巴公司因为杭州和美国两个地方的机房都部署了数据库实例,但因为跨机房同步数据的业务需求 ,便孕育而生出了Canal,主要是基于trigger(触发器)的方式获取增量变更。从2010年开始,阿里巴巴公司开始逐步尝试数据库日志解析,获取增量变更的数据进行同步,由此衍生出了增量订阅和消费业务。当前的Canal支持的数据源端MySQL版本包括:5.1.x 、5.5.x 、5.6.x、5.7.x、8.0.x。Canal的应用场景目前普遍基于日志增量订阅和消费的业务,主要包括:基于数据库增量日志解析,提供增量数据订阅和消费数据库镜像数据库实时备份索引构建和实时维护(拆分异构索引、倒排索引等)业务Cache刷新带业务逻辑的增量数据处理Canal的工作原 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照