大数据Flink进阶:数据架构的演变

Posted Lansonli

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据Flink进阶:数据架构的演变相关的知识,希望对你有一定的参考价值。

数据架构的演变

近年来随着越来越多的大数据技术被开源,例如:HDFS、Spark等,伴随这些技术的发展与普及, 促使企业数据架构的演进——从传统的关系型数据存储架构逐步演化为分布式处理和存储的架构。我们通过数据架构的演变角度来了解下为什么今天Flink实时计算引擎会爆火起来。

一、业务处理-单体架构

传统单体架构最大的特点是集中式数据存储,一个企业中可能有很多业务系统,例如:订单系统、CRM系统、ERP系统等,这些系统的数据一般存储在关系型数据库中,这些存储的数据一般反应当前的业务状态,也就是存储的是支撑业务正常运转的事务数据,例如:系统订单交易量、网站活跃用户数、每个用户在线的状态等,针对这些数据库的操作也主要是增删改查操作,单体架构如下:

以上是关于大数据Flink进阶:数据架构的演变的主要内容,如果未能解决你的问题,请参考以下文章

Flink 完美搭档:数据存储层上的 Pravega

大数据Flink进阶:Apache Flink是什么

大数据Flink进阶:Flink入门案例

大数据Flink进阶:Flink History Server配置使用

大数据Flink进阶:Flink集群部署

大数据Flink进阶(十三):Flink 任务提交模式