博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
maxwell的使用--日志增量订阅&消费
阅读量:6579 次
发布时间:2019-06-24

本文共 362 字,大约阅读时间需要 1 分钟。

hot3.png

1、maxwell原理和使用场景

发送MySQL binlog到Hadoop(kafka+flume)

当前场景:从mysql实时拉取修改和增量数据

2、maxwell的优缺点

3、maxwell的搭建

4、maxwel的使用步骤

5、和canal相比

maxwell实时抓取mysql数据的原理也是基于binlog,和canal相比,maxwell更像是canal server + 实时client。(数据抽取 + 数据转换) maxwell集成了kafka producer,直接从binlog获取数据更新并写入kafka,而canal则需要自己开发实时client将canal读取的binlog内容写入kafka中。

转载于:https://my.oschina.net/u/3267050/blog/1620044

你可能感兴趣的文章
php http 请求类
查看>>
大数据实验室(大数据基础培训)——Zookeeper的安装、配置及基础使用
查看>>
Apche pig计算数据 导入Hbase
查看>>
Mysqlbinlog 使用
查看>>
IT怎么学好
查看>>
又遇到问题:wrong ELF class: ELFCLASS32 in Unknown on line
查看>>
Timer类的使用
查看>>
实现一种书本的展示特效
查看>>
vue nextTick深入理解---vue性能优化、DOM更新时机、事件循环机制
查看>>
趣图:这是招聘超神级别的程序员?
查看>>
centos7 关闭防火墙
查看>>
新浪博客“网络繁忙请稍后再试”
查看>>
https下本地js弹出框不起作用
查看>>
什么是Node - 学习node
查看>>
网站推广应有的心态
查看>>
【MAC FTP】使用mac ftp服务
查看>>
Tomcat配置多个Host、Context的情况下,内存占用差别很大
查看>>
Oracle Database 11g RAC手册(第2版)(oracle产品管理总监 BobThome作序推荐)
查看>>
分享android打开指定位置sqlite db的一个容错处理技巧
查看>>
纯虚函数
查看>>