Flink实时数仓数据采集

一、系统架构

前端埋点可以获取更多的信息,不仅可以获取用户点击浏览行为数据,还能获得用户定位位置信息等,滑动转跳

一、日志数据采集

SpringBoot --> Nginx-->(flume)-->Kafka-->flink 

可以不用flume,直接怼到kafka消息队列,flikk消费

二、业务数据库数据采集

MYsql/Oracle --> Maxwell/canal -->kafka -->flink 

Guess you like

Origin blog.csdn.net/qq_22473611/article/details/119494624