生产环境实践:Cana实现MySQL到ES实时同步

生产环境实践:Cana实现MySQL到ES实时同步
注:Canal必备基础及安装部署,详看完整文档,以下直接摘取干货分享。

实现MySQL-->Canal-Server(Instance)--->ClientAdapter--->ES同步流程

所涉及组件的关系(如下)
生产环境实践:Cana实现MySQL到ES实时同步

相关组件的作用

生产环境实践:Cana实现MySQL到ES实时同步

准备业务库表

在MySQL中创建test库及test表作为业务库表,我们最终就是要同步test.test表的数据到ES:
生产环境实践:Cana实现MySQL到ES实时同步
执行如下MySQL命令:
生产环境实践:Cana实现MySQL到ES实时同步

配置Instance

前面安装了Canal_Server,接下来需要给Canal_Server创建Instance来拉取MySQL的binlog。
1、登录Canal_Admin
生产环境实践:Cana实现MySQL到ES实时同步
2、进入Instance管理页
生产环境实践:Cana实现MySQL到ES实时同步
3、新建Instance
点击新建Instance就会进入新建Instance配置页面:
生产环境实践:Cana实现MySQL到ES实时同步
4、载入Instance模板
Instance配置不需要从零开始写,先载入模板即可,如下图:
生产环境实践:Cana实现MySQL到ES实时同步
5、配置Instance
生产环境实践:Cana实现MySQL到ES实时同步
6、Instance命名
生产环境实践:Cana实现MySQL到ES实时同步
7、保存Instance
生产环境实践:Cana实现MySQL到ES实时同步
保存之后,就自动显示在Instance列表页了:
生产环境实践:Cana实现MySQL到ES实时同步
8、自动启动Instance
刷新Instance列表页,过一会就已经变成启动状态了:
生产环境实践:Cana实现MySQL到ES实时同步
至此,MySQL的binlog数据就可以被Canal-Server拉取到了。

相关推荐