生产环境实践:Cana实现MySQL到ES实时同步

注:由于文章篇幅有限,完整文档可扫下面二维码免费获取,更有深受好评的大数据实战精英+架构师好课你。

速点链接加入高手战队:http://www.dajiangtai.com/course/112.do

注:Canal必备基础及安装部署,详看完整文档,以下直接摘取干货分享。

实现MySQL-->Canal-Server(Instance)--->ClientAdapter--->ES同步流程

所涉及组件的关系(如下)

相关组件的作用

 

准备业务库表

在MySQL中创建test库及test表作为业务库表,我们最终就是要同步test.test表的数据到ES:

 

执行如下MySQL命令:

 

配置Instance

前面安装了Canal_Server,接下来需要给Canal_Server创建Instance来拉取MySQL的binlog。

1、 登录Canal_Admin

 

2、 进入Instance管理页

3、新建Instance

点击新建Instance就会进入新建Instance配置页面:

4、载入Instance模板

Instance配置不需要从零开始写,先载入模板即可,如下图:

 

5、配置Instance

 

6、Instance命名

 

7、保存Instance

 

保存之后,就自动显示在Instance列表页了:

 

8、自动启动Instance

刷新Instance列表页,过一会就已经变成启动状态了:

至此,MySQL的binlog数据就可以被Canal-Server拉取到了。

猜你喜欢

转载自www.cnblogs.com/dajiangtai/p/12377431.html