流处理发展
俗话说的好,“发展史都不知道,就跟他人讨论,犹如当众耍流氓”,什么?没听过,那现在可要谨记了!!
一、数据处理架构简析
1.1 事务型处理
代表数据库mysql
1.2 分析处理
将数据从业务数据库复制到数仓,然后进行分析和查询
1.3 有状态的流处理
什么?不熟悉?不知道?那你可能需要去看看我的Flink专栏了。
二、大数据处理的演变
传统的数据处理方式介绍完了当然要需要紧扣主题的去介绍处理的演变了,线上图
2.1 lambda架构
很有名的分布式大数据处理结构,不是非常有名,总结起来也就是用两套系统,同时保证低延迟和结果准确
2.2 Kappa架构
图解,细品
2.3 流处理发展史
网上看到的一张图,简单明了介绍了流处理框架演变以及优劣