在忙也需要看的大数据处理发展史

流处理发展

俗话说的好,“发展史都不知道,就跟他人讨论,犹如当众耍流氓”,什么?没听过,那现在可要谨记了!!

一、数据处理架构简析

1.1 事务型处理

代表数据库mysql
在这里插入图片描述

1.2 分析处理

将数据从业务数据库复制到数仓,然后进行分析和查询
在这里插入图片描述

1.3 有状态的流处理

什么?不熟悉?不知道?那你可能需要去看看我的Flink专栏了。
在这里插入图片描述

二、大数据处理的演变

传统的数据处理方式介绍完了当然需要紧扣主题的去介绍处理的演变了,线上图
在这里插入图片描述

2.1 lambda架构

很有名的分布式大数据处理结构,不是非常有名,总结起来也就是用两套系统,同时保证低延迟和结果准确
在这里插入图片描述

2.2 Kappa架构

图解,细品
在这里插入图片描述

2.3 流处理发展史

网上看到的一张图,简单明了介绍了流处理框架演变以及优劣

在这里插入图片描述

已标记关键词 清除标记
©️2020 CSDN 皮肤主题: 技术黑板 设计师:CSDN官方博客 返回首页