maxwell的使用--日志增量订阅&消费

1、maxwell原理和使用场景

发送MySQL binlog到Hadoop(kafka+flume)

当前场景:从mysql实时拉取修改和增量数据

2、maxwell的优缺点

3、maxwell的搭建

4、maxwel的使用步骤

5、和canal相比

maxwell实时抓取mysql数据的原理也是基于binlog,和canal相比,maxwell更像是canal server + 实时client。(数据抽取 + 数据转换) maxwell集成了kafka producer,直接从binlog获取数据更新并写入kafka,而canal则需要自己开发实时client将canal读取的binlog内容写入kafka中。

https://zhengheng.me/2016/12/28/maxwell/

猜你喜欢

转载自my.oschina.net/u/3267050/blog/1620044